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《软件 测试 技术 与 实践》 


高 等 教育 的 大 众 化 .普及 化 对 强调 应 用 型 教学 型 的 相关 课程 的 教学 工作 提出 了 更 高 
的 要 求 , 新 的 高 等 教育 形势 需要 我 们 积极 进行 教学 改革 ,研究 和 探索 新 的 教学 方法 。 

本 教材 是 我 们 一 系列 教育 教学 改革 项 目 成 果 的 结晶 之 一 。2007 年 ,学 院 “ 软 件 工程 ” 
本 科 精 品 课程 建设 项 目 顺 利 结 题 ;2008 年 ,浙江 省 高 等 教育 重点 建设 教材 一 一 软件 工程 
基础 项 目 顺利 完成 ;2009 年 ,“ 面 向 应 用 型 人 才 培 养 的 程序 设计 系列 课程 ”教学 团队 成 功 
入 选 “ 浙 江 省 省 级 教学 团队 ”等 。 

在 长 期 的 教学 实践 中 ,我 们 体会 到 “因材施教 "是 教育 教学 的 重要 原则 之 一 ,把 实验 实 
践 环节 与 理论 教学 相 融 合 , 抓 实验 实践 教学 促进 学 科 理 论 知识 的 学 习 , 是 有 效 地 提高 教学 
效果 和 教学 水 平 的 重要 方法 之 一 。 随 着 教改 研究 的 不 断 深入 ,我 们 已 经 开发 了 数 十 本 以 
实验 实践 方法 为 主体 开展 教学 活动 的 具有 鲜明 教学 特色 的 课程 主教 材 和 实验 教材 ,相关 
的 数 十 篇 教改 研究 论文 也 赢得 了 普遍 的 好 评 , 并 多 次 获得 教学 优秀 成 果 奖 。 

本 书 是 为 高 等 院 校 软件 工程 及 IT 相关 各 专业 “软件 测试 技术 ”课程 开发 的 具有 实践 
特色 的 新 教材 ,相关 教学 内 容 主要 依据 信息 技术 国家 标准 GB/T 15532 一 2008《 计 算 机 软 
件 测 试 规范 》 进 行 设计 ,通过 一 系列 在 网 络 环境 和 实际 开发 环境 下 学 习 和 熟悉 软件 测试 技 
术 知 识 的 实验 练习 ,把 软件 测试 技术 的 概念 理论 ,技术 和 工具 运用 融入 实践 当中 ,从 而 加 
深 对 软件 测试 技术 知识 的 认识 ,理解 和 掌握 。 教 学 内 容 与 实验 内 容 紧密 结合 ,每 个 实验 均 
留 有 “实验 总 结 " 和 “教师 评价 ”部 分 ;全 部 实验 完成 后 的 实验 总 结 部 分 还 设计 了 “课程 学 习 
能 力 测评 ”等 内 容 。 和 希望 以 此 方便 师 生 交流 对 学 科 知识 .实验 内 容 的 理解 与 体会 ,以 及 教 
师 对 学 生 学 习 情 况 进 行 必要 的 评估 。 

圳 稚 ,张丽娜 、 王 文 . 命 雪 永 . 左 伍 衡 、 吴 艳 等 参加 了 本 书 的 部 分 编 扎 工作。 本 书 的 编 
撰 得 到 了 浙江 大 学 城市 学 院 .浙江 工业 大 学 之 江 学 院 、. 浙 江 商业 职业 技术 学 院 、 温 州 大 学 
城市 学 院 等 多 所 院 校 师 生 的 支持 ,在 此 一 并 表示 感谢 ! 本 书 相关 的 实验 素材 可 以 从 清华 
大 学 出 版 社 网 站 上 (www. tup. com) 下 载 。 欢 迎 教师 索取 为 本 书 教学 配套 的 相关 资料 和 
交流 :E-mail 地 址 是 zhousu@ qq. com, QQ 号 码 是 81505050, 个 人 博客 网 址 是 http:// 


blog. sina. com. cn/zhousu58。 


周 苏 
2012 年 10 月 于 西子 湖畔 
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第 1 章 软件 测试 概述 


软件 开发 的 最 基本 要 求 是 按时 、 高 质量 地 发 布 软件 产品 ,而 软件 测试 是 致力 于 提高 软 
件 产品 质量 的 重要 手段 之 一 ,也 是 软件 工程 不 可 缺少 的 重要 部 分 。 就 软件 而 言 , 不 论 采 用 
什么 技术 和 什么 方法 来 组 织 开发 ,其 产品 中 仍然 会 存在 或 多 或 少 的 错误 和 问题 。 采 用 先 
进 的 开发 方式 和 较 完善 的 开发 流程 ,可 以 减少 错误 的 引入 ,但 是 不 可 能 杜绝 软件 中 的 错 
误 , 这 些 引 入 的 错误 就 需要 通过 测试 来 发 现 。 软 件 测试 是 对 软件 产品 及 其 阶段 性 工作 成 
果 进 行 质量 检查 ,力求 发 现 其 中 的 各 种 缺陷 ,并 督促 缺陷 得 到 修正 ,从 而 控制 软件 产品 的 
质量 。 


1.1 软件 工程 与 软件 测试 


国家 标准 (软件 工程 术语 》(GB/T11457 一 2006) 定 义 了 软件 生存 周期 , 即 : 从 设计 软 
件 产品 开始 到 产品 不 能 再 使 用 时 为 止 的 时 间 周 期 。 亦 即 : 一 个 计算 机 软件 ,从 出 现 一 个 
构思 之 日 起 ,经 过 开发 成 功 投入 使 用 ,在 使 用 中 不 断 增补 修订 ,直到 最 后 决定 停止 使 用 ,并 
被 另 一 项 软件 代替 之 时 止 , 这 被 认为 是 该 软件 的 一 个 生存 周期 (或 称 生命 周期 .生存 期 ， 
life cycle) 。 

一 个 软件 产品 的 生存 周期 可 以 划分 成 若干 个 互相 区 别 而 又 有 联系 的 阶段 ,每 个 阶段 
中 的 工作 均 以 上 一 阶段 工作 的 结果 为 依据 ,并 为 下 一 阶段 的 工作 提供 了 前 提 。 

由 于 工作 的 对 象 和 范围 的 不 同 以 及 经 验 的 不 同 , 对 软件 生存 周期 中 各 阶段 的 划分 也 
不 尽 相 同 。 但 是 ,这 些 不 同 划 分 中 有 许多 相同 之 处 .《 计 算 机 软件 开发 规范 》 
(GB/T8566 一 1988,《 软 件 生存 周期 过 程 ;GB/T8566 一 2001 的 前 身 ) 将 软件 生存 周期 划分 
为 以 下 8 个 阶段 , 即 : 可 行 性 研究 与 计划 、 需 求 分 析 、 概 要 设计 ( 即 结构 设 计 )、 详 细 设 计 、 
实现 (包括 单元 测试 ) ,组 装 测试 ( 即 集 成 测试 ) ,确认 测试 ,使 用 和 维护 。 

图 1-1 和 图 1-2 分 别 说 明了 在 典型 情况 下 ,软件 生存 周期 各 阶段 的 工作 量 所 占 的 比 
重 。 图 1-1 说 明 运 行 维护 工作 量 要 占 整 个 生存 周期 工作 量 的 一 半 以 上 ,图 1-2 则 说 明了 
测试 阶段 (组 装 测试 和 确认 测试 ) 的 工作 量 约 占 整 个 开发 期 工作 量 的 近 一 半 。 


国 分 析 20% 

国 设 计 15% 

口 编码 20% 
国 开发 33% 加 组装 测试 25% 
国 维护 67% 图 确认 测试 20% 


图 1-1 软件 生存 周期 工作 量 分 配 图 1-2 开发 阶段 工作 量 分 配 


《 款 件 测试 技术 与 实践) 


在 软件 生存 周期 中 的 每 个 阶段 .每 个 时 刻 都 存在 着 软件 测试 活动 ,软件 测试 伴随 着 软 
件 开发 ,检验 每 一 个 阶段 性 的 成 果 是 否 符 合 质量 要 求 和 达到 预先 定义 的 目标 ,以 尽 可 能 早 
地 发 现 错误 并 及 时 改正 。 

一 项 对 软件 测试 实践 的 研究 结果 表明 : 失误 造成 的 差错 越 是 发 生 在 生存 周期 的 前 
期 ,在 系统 交付 使 用 时 造成 的 影响 和 损失 就 越 大 ,要 纠正 它 所 花费 的 代价 也 越 高 。 而 越 早 
发 现 软件 中 存在 的 问题 ,开发 费用 就 越 低 。 在 编码 后 修改 软件 缺陷 的 成 本 是 编码 前 的 10 
倍 ,在 产品 交付 后 修改 软件 缺陷 的 成 本 是 交付 前 的 10 倍 。 软 件 质量 越 高 ,软件 发 布 后 的 
维护 费用 越 低 。 另 外 ,根据 对 国际 著名 IT 企业 的 统计 ,它们 的 软件 测试 费用 占 整个 软件 
工程 所 有 研发 费用 的 50% 以 上 。 


1.2 软件 测试 的 定义 


国家 标准 GB/T11457 一 2006《 软 件 工程 术语 ) 定 义 了 “软件 测试 (testing)”, 是 指 “ 由 
人 工 或 自动 方法 来 执行 或 评价 系统 或 系统 部 件 的 过 程 ,以 验证 它 是 否 满足 规定 的 需求 ;或 
识别 出 期 望 的 结果 和 实际 结果 之 间 有 无 差别 ,” 与 之 相关 ,所 谓 排 错 、 调 试 (debugging) ,是 
指 “ 查 找 , 分 析 和 纠正 错误 的 过 程 ”。 


1.2.1 软件 缺陷 


所 谓 “ 软 件 缺 陷 "(Bug) 是 指 计算 机 系统 或 者 程序 中 存在 的 任何 一 种 破坏 正常 运行 能 
力 的 问题 .错误 ,或 者 隐藏 的 功能 缺陷 、 瑕 疲 , 其 结果 会 导致 软件 产品 在 某 种 程度 上 不 能 满 
足 用 户 的 需要 。 

。 从 产品 内 部 看 ,软件 缺陷 是 软件 产品 开发 或 维护 过 程 中 所 存在 的 错误 毛病 等 各 

种 问题 。 

。 从 产品 外 部 看 ,软件 缺陷 是 系统 所 需要 实现 的 某 种 功能 的 失效 或 违背 。 

软件 缺陷 不 仅 表现 在 功能 失效 方面 ,还 包括 : 
运行 出 错 ,包括 运行 中 断 、 系 统 崩 溃 、 界 面 混乱 。 
计算 错误 ,导致 结果 不 正确 。 

。 功能、 特性 没有 实现 或 部 分 实现 。 

。 在 某 种 特定 条 件 下 没 能 给 出 正确 或 准确 的 结果 。 

。 计算 的 结果 没有 满足 所 需要 的 精度 。 

。 用 户 界面 不 美观 ,如 文字 显示 不 对 齐 、 字 体 大 小 不 一 致 等 。 

。 需求 规格 说 明 书 的 问题 ,如 漏 掉 某 个 需求 .表达 不 清楚 或 前 后 矛盾 等 。 

。 设 计 不 合理 ,存在 缺陷 。 例 如 计算 机 游戏 只 能 用 键盘 玩 而 不 能 用 鼠标 玩 。 

。 实际 结果 和 预期 结果 不 一 致 。 

。 用 户 不 能 接受 的 其 他 问题 ,如 存 取 时 间 过 长 操作 不 方便 等 。 

由 于 软件 系统 自身 越 来 越 复杂 ,不 管 是 需求 分 析 还 是 程序 设计 等 都 面临 越 来 越 大 的 
挑战 ,这 决定 了 在 软件 开发 过 程 中 出 现 软件 缺陷 是 不 可 避免 的 。 此 外 ,虽然 原因 有 很 多 ， 
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但 研究 表明 ,软件 需求 说 明 书 是 软件 缺陷 出 现 最 多 的 地 方 ,如 图 1-3 所 示 。 
美国 商务 部 国家 标准 和 技术 研究 所 (NIST) 进 
行 的 一 项 研究 表明 ,软件 中 存在 的 缺陷 所 造成 的 损 


失 是 巨大 的 。 即 使 在 软件 企业 内 部 ,软件 缺陷 同样 加 需求 说 明 书 549% 
会 给 企业 带 来 很 大 的 成 本 。 根 据 统计 数据 ,多 数 软 四 设计 25 
件 企业 的 这 种 劣质 成 本 甚至 占 开发 总 成 本 的 40% ~ 日 其 他 gx 


50%。 有 鉴于 此 ,必须 足够 地 重视 软件 缺陷 所 引起 图 二 3 软件 缺陷 构成 示意 图 
的 代价 ,强调 软件 测试 尽早 介入 项 目 ,尽快 修复 所 发 
现 的 缺陷 。 


1.2.2 软件 测试 的 定义 


在 早期 的 软件 开发 过 程 中 ,软件 工程 的 概念 和 思想 还 没有 形成 ,也 没有 明确 的 分 工 ， 
软件 开发 等 于 编程 ,开发 过 程 随意 和 无 序 , 测 试 和 调试 混淆 在 一 起 ,没有 独立 的 测试 ,所 有 
的 工作 基本 都 是 由 程序 员 完 成 ,一 面 写 程序 ,一 面 调试 程序 。 这 时 ,测试 活动 往往 发 生 在 
代码 完成 之 后 ,测试 被 认为 是 一 种 产品 检验 的 手段 ,成 为 软件 生存 周期 中 最 后 一 项 活动 而 
进行 。 在 这 一 时 期 ,对 测试 的 投入 还 很 少 , 也 缺乏 有 效 的 测试 方法 ,所 以 ,软件 产品 交付 到 
客户 那里 ,仍然 存在 很 多 问题 ,软件 产品 的 质量 无 法 保证 。 

1972 年 ,软件 测试 领域 的 先驱 Bill Hetzel 博士 为 软件 测试 下 了 一 个 定义 :“ 软 件 测 
试 就 是 为 程序 能 够 按 预期 设想 运行 而 建立 足够 的 信心 ”。1983 年 ,他 又 将 软件 测试 的 定 
义 修改 为 :“ 软 件 测试 就 是 一 系列 活动 ,这 些 活动 是 为 了 评估 一 个 程序 或 软件 系统 的 特性 
或 能 力 , 并 确定 其 是 否 达到 了 预期 结果 ”。 

在 上 述 定义 中 ,至 少 可 以 看 到 以 下 几 点 : 

。 测试 是 试图 验证 软件 是 “工作 的 ”, 也 就 是 验证 软件 功能 执行 的 正确 性 。 测 试 的 目 

的 是 验证 软件 是 否 符合 事先 定义 的 要 求 。 
。 测试 活动 以 人 们 的 “设想 ”或 “预期 的 结果 ”为 依据 。 这 里 的 “设想 ”或 “预期 的 结 
果 ” 是 指 需 求 定义 、 软 件 设计 的 结果 。 

Bill Hetzel 的 观点 受到 了 业界 一 些 权威 的 质疑 和 挑战 ,例如 Glenford J. Myers 认 
为 : 测试 不 应 该 着 眼 于 验证 软件 是 工作 的 ,相反 ,应 该 用 逆向 思维 去 发 现 尽 可 能 多 的 错 
误 。 他 认为 ,从 心理 学 的 角度 看 ,如 果 将 “验证 软件 是 工作 的 ”作为 测试 的 目的 ,非常 不 利 
于 测试 人 员 发 现 软件 的 错误 。 因 此 ,1979 年 Myers 给 出 了 软件 测试 的 不 同 定 义 :“ 测 试 
是 为 了 发 现 错误 而 执行 一 个 程序 或 者 系统 的 过 程 ”。 从 这 个 定义 可 以 看 出 ,假定 软件 总 是 
有 错误 的 ,测试 就 是 为 了 发 现 缺 陷 , 而 不 是 证 明 程序 无 错误 。 发 现 了 问题 说 明 程 序 有 错 ， 
但 如 果 没 有 发 现 问 题 ,并 不 能 说 明 问 题 就 不 存在 ,而 是 至 今 尚未 发 现 软 件 中 所 潜在 的 
问题 。 

从 Myers 的 定义 延伸 出 去 ,一 个 成 功 的 测试 必须 是 发 现 了 软件 的 问题 ,否则 测试 就 
没有 价值 。Myers 提出 的 “测试 的 目的 是 证 伪 ” 这 一 概念 ,和 Bill Hetzel 的 观点 “测试 是 试 
图 验证 软件 是 正确 的 ”, 为 软件 测试 的 发 展 指出 了 不 同 的 努力 方向 。 


《 坎 件 测试 技术 与 实 中 


1.2.3 验证 和 确认 


软件 测试 是 通常 所 讲 的 更 为 广泛 的 主题 一 一 验证 与 确认 (Verification and Validation， 
V&V) 的 一 部 分 。 其 中 ,验证 (Verification) 是 需求 说 明 书 的 确认 


指 确保 软件 正确 地 实现 某 一 特定 功能 的 一 系列 人 
活动 ,而 确认 (Validation) 是 广义 上 的 软件 测 


静态 确认 《4 人 工分 析 
试 , 指 的 是 确保 开发 的 软件 可 追溯 到 客户 需求 nm] 


的 另外 一 系列 活动 和 过 程 。 确 认 所 包含 的 内 容 动态 确认 | 
如 图 1-4 所 示 。 概 括 起 来 “软件 测试 ?又 可 定 测试 
义 为 “由 “验证 ?和 “有效 性 确认 "活动 所 构成 的 图 1-4 确认 所 包含 的 内 容 


整体 ”。 

。“ 验 证 "是 检验 软件 是 否 已 正确 地 实现 了 软件 需求 说 明 书 所 定义 的 系统 功能 和 特 
性 。 验 证 过 程 提供 证 据 表明 软件 相关 产品 与 所 有 生命 周期 活动 的 要 求 (如 正确 
性 ,完整 性 ,一 致 性 ,准确 性 等 ) 相 一 致 ,相当 于 以 软件 需求 说 明 书 为 标准 进行 软件 
测试 的 活动 。 
“有 效 性 确认 ”是 确认 所 开发 的 软件 是 否 满足 用 户 真正 需求 的 活动 。 一 切 从 客户 
出 发 ,理解 客户 的 需求 ,对 软件 需求 定义 ` 设 计 的 怀疑 ,发 现 需求 定义 和 产品 设计 
中 的 问题 。 这 主要 通过 各 种 软件 评审 活动 来 实现 ,包括 让 客户 参加 评审 、 测 试 
活动 。 

因为 没有 办 法 证 明 软件 是 正确 的 ,软件 测试 本 身 总 是 具有 一 定 的 风险 性 ,所 以 被 认为 
是 对 软件 系统 中 潜在 的 各 种 风险 进行 评估 的 活动 。 从 风险 的 观点 看 ,软件 测试 就 是 对 风 
险 的 不 断 评估 ,引导 软件 开发 的 工作 ,进而 将 最 终 发 布 的 软件 所 存在 的 风险 降 到 最 低 。 基 
于 风险 的 软件 测试 可 以 被 看 做 是 一 个 动态 的 监控 过 程 , 对 软件 开发 全 过 程 进行 检测 ,随时 
发 现 问题 .报告 问题 ,并 重新 评估 新 的 风险 ,设置 新 的 监控 基准 ,不 断 地 持续 下 去 ,包括 回 
归 测 试 。 这 时 ,软件 测试 完全 可 以 看 做 是 软件 质量 控制 的 过 程 。 

实际 上 ,具体 是 由 哪些 类 型 的 测试 构成 了 确认 ,对 此 观点 存在 较 大 的 分 歧 。 一 些 人 认 
为 所 有 的 测试 都 是 验证 ,而 确认 是 在 对 需求 进行 评审 和 认可 时 进行 的 ,也 许 更 晚 一些 , 当 
系统 投入 运行 时 由 用 户 进行 的 。 另 外 一 些 人 将 单元 测试 和 集成 测试 看 成 验证 ,而 将 高 阶 
测试 (确认 测试 和 验收 测试 ) 看 做 确认 。 

验证 与 确认 包含 广泛 的 SQA( 软 件 质量 保证 ?活动 ,如 正式 技术 评审 、 质 量 和 配置 审 
核 , 性 能 监控 ,仿真 . 可 行 性 研究 文档 评审 数据库 评审 、 算 法 分 析 、 开 发 测试 . 易 用 性 测 
试 , 合 格 性 测试 ,验收 测试 和 安装 测试 。 虽 然 测试 在 验证 与 确认 中 起 到 了 非常 重要 的 作 
用 ,但 是 很 多 其 他 的 活动 也 是 必 不 可 少 的 。 

测试 确实 为 软件 质量 的 评估 (更 实际 地 说 是 错误 的 发 现 ) 提 供 了 最 后 的 堡垒 。 但 测试 
不 应 当 被 看 做 是 安全 网 。 正 如 人 们 所 说 的 那样 :“ 你 不 能 测试 质量 。 如 果 开 始 测试 之 前 
质量 不 佳 ,那么 当 你 完成 测试 时 质量 仍然 不 佳 ." 在 软件 工程 的 整个 过 程 中 ,质量 已 经 被 包 
含 在 软件 之 中 。 方 法 和 工具 的 正确 运用 、 有 效 的 正式 技术 评审 、 坚 持 不 懈 的 管理 与 测量 ， 
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这 些 都 形成 了 在 测试 过 程 中 所 确认 的 质量 。 
Miller 将 软件 测试 和 质量 保证 联系 在 一 起 ,他 认为 :“ 无 论 是 大 规模 系统 还 是 小 规模 
系统 ,程序 测试 的 根本 动机 都 是 使 用 经 济 且 有 效 的 方法 来 确认 软件 质量 ”。 


1.3 软件 测试 的 分 类 


对 于 软件 测试 ,可 以 从 不 同 的 角度 加 以 分 类 ,例如 可 以 根据 测试 的 方法 进行 分 类 ,也 
可 以 根据 测试 的 对 象 .测试 的 目标 和 测试 的 阶段 进行 分 类 。 


1.3.1 软件 测试 与 软件 开发 的 关系 


在 软件 开发 的 瀑布 模型 ( 见 图 1-5) 中 ,软件 测试 处 在 “编码 ”的 下 游 和 “软件 维护 ”的 
上 游 , 先 有 编码 (程序 设计 ), 后 有 测试 。 瀑 布 模型 强调 测试 是 对 程序 的 检验 ,测试 只 有 等 
到 程序 完成 了 才 可 以 执行 。 但 是 ,属于 传统 软件 工程 的 瀑布 模型 有 很 大 的 局 限 性 ,与 软件 
开发 的 迭代 (iteration) 思 想 .敏捷 (agile) 方 法 存在 很 大 的 冲突 ,也 不 符合 软件 工程 的 最 佳 


需求 分 析 

设计 4 

编码 

[测试 A 
维护 gg 

图 1-5 软件 开发 瀑布 模型 简单 示意 


需求 分 析 在 软件 开发 的 最 前 端 ,说 明 它 对 后 期 的 影响 最 大 ,所 以 说 ,软件 需求 分 析 很 
重要 。 要 想 成 功 开发 一 个 软件 产品 ,首先 要 做 好 需求 分 析 。 但 另 一 方面 ,在 需求 分 析 阶 
段 , 往 往 很 难 彻底 弄 清楚 用 户 对 产品 的 各 项 具体 的 要 求 。 由 于 大 多 数 使 用 或 将 要 使 用 计 
算 机 产品 的 用 户 不 是 计算 机 方面 的 专业 人 员 ,甚至 对 计算 机 一 点 都 不 了 解 , 所 以 对 计算 机 
能 做 哪些 事情 不 能 做 哪些 事情 、 善 于 做 哪些 事情 不 善于 做 哪些 事情 等 都 不 清楚 ,只 能 给 
出 软件 的 一 般 性 功能 或 目标 要 求 ,不 能 提出 具体 的 要 求 ,也 不 能 给 出 规范 的 、 科 学 的 、 详 细 
的 输入 和 输出 需求 。 

现在 人 们 普遍 认为 ,软件 测试 应 该 贯穿 于 整个 软件 生存 周期 ,从 需求 评审 、 设 计 评 审 
开始 ,测试 就 介入 到 软件 产品 的 开发 活动 或 软件 项 目 实施 中 。 测 试 人 员 借 助 于 需求 定义 
的 阅读 ,讨论 和 和 审查, 不仅 可 以 发 现 需求 定义 的 问题 ,而 且 可 以 了 解 产 品 的 设计 特性 、 用 户 
的 真正 需求 ,确定 测试 目标 ,准备 测试 用 例 并 策划 测试 活动 。 同 理 , 在 软件 设计 阶段 ,测试 
人 员 可 以 了 解 系统 是 如 何 实现 的 、 构 建 在 什么 样 的 平台 之 上 等 各 类 问题 ,以 衡量 系统 的 可 
测试 性 ,检查 系统 的 设计 是 否 符合 系统 的 可 靠 性 要 求 .是否 存 在 单 点 实效 的 严重 问题 等 。 

以 瀑布 模型 为 例 ,为 了 发 现 软件 需求 分 析 \ 设 计 、 编 码 阶段 的 不 同 错误 ,软件 测试 可 分 
成 与 需求 分 析 、 概 要 设计 、 详 细 设 计 / 编 码 相 对 应 的 3 步 , 即 配置 项 (确认 ) 测 试 .集成 (组 
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装 ) 测 试 和 单元 测试 ( 见 图 1-6) 。 


| 
一 -| 确认 测试 一 -| 集 上 测试 


图 1-6 软件 测试 步骤 


一 | 需求 分 析 一 = 概要 设计 六 =| 详细 设计 | 


单元 测试 


1.3.2 测试 驱动 开发 (TDD) 


在 目前 比较 流行 的 敏捷 方法 (如 极限 编程 ) 中 ,提出 了 “测试 驱动 开发 (Test Driven 
Development，TDD)”, 即 测试 在 先 、 编 码 在 后 的 开发 方法 。TDD 方法 有 别 于 以 往 的 “ 先 
编码 后 测试 ”的 开发 过 程 , 而 是 在 编程 之 前 先 写 测 试 脚本 或 设计 测试 用 例 。TDD 在 敏捷 
方法 中 被 称 为 “测试 第 一 的 开发 (test-first programming)”, 而 在 IBM Rational 统一 过 程 
(Rational Unified Process, RUP) 中 被 称 为 “测试 第 一 的 设计 (test-first design)”。 所 有 
这 些 ,都 在 强调 “测试 先行 ”, 使 得 开发 人 员 对 所 写 的 代码 有 足够 的 信心 ,同时 也 有 勇气 进 
行 代码 重 构 。TDD 具体 实施 过 程 如 图 1-7 所 示 。 


开始 二 一 > 为 新 性 能 


We 写 Wi 


如 果 需 要 编译 
则 进行 重 构 Vv 
N 人 
运行 测试 编译 错误 
并 通过 


运行 测试 
SS sft co mR 
图 1-7 测试 驱动 开发 的 软件 过 各 


在 打算 为 软件 添加 某 项 新 功能 时 , 先 不 急于 写 程序 代码 ,而 是 将 各 种 特定 条 件 、 使 用 
场景 等 想 清楚 ,为 待 编写 的 代码 先 写 一 段 测 试用 例 。 然 后 ,利用 集成 开发 环境 或 相应 的 测 
试 工具 来 执行 这 段 测 试用 例 ,结果 自然 是 失败 。 利 用 没有 通过 测试 的 错误 信息 反馈 ,来 了 
解 代 码 没 有 通过 测试 用 例 的 原因 ,有 针对 性 地 逐步 添加 代码 。 要 使 该 测试 用 例 通 过 ,就 要 
补充 、 修 改 代码 ,直到 代码 符合 测试 用 例 的 要 求 ,获得 通过 。 测 试用 例 全 部 执行 成 功 ,说 明 
新 添加 的 功能 通过 了 单元 测试 ,可 以 进入 下 一 个 环节 。 

TDD 从 根本 上 改变 了 开发 人 员 的 编程 态度 ,开发 人 员 不 再 像 过 去 那样 随意 写 代码 ， 
要 求 写 的 每 行 代码 都 是 有 效 的 代码 , 写 完 所 有 的 代码 就 意味 着 完成 了 编码 任务 。 而 在 此 
之 前 ,代码 写 完 了 ,实际 上 编程 工作 还 没有 结束 ,因为 还 有 许多 错误 等 待 去 修正 。 测 试 驱 
动 开发 在 于 保障 代码 的 正确 性 ,能 够 迅速 发 现 、 定 位 程序 问题 ,大 大 减少 返工 的 可 能 性 , 降 
低 开 发 成 本 。 
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1.3.3 软件 测试 的 类 别 


通过 分 类 ,可 以 对 软件 测试 有 一 个 较为 完整 的 认识 。 

(1) 按 测试 的 对 象 或 范围 (单元 /组 件 , 文 档 . 子 系统 .系统 等 ) 分 类 ,有 : 需求 审查 、 设 
计 审 查 ;单元 测试 ,包括 组 件 测试 .模块 测试 等 ;程序 测试 ;系统 测试 ;文档 测试 ;Web 应 用 
测试 .客户 端 测试 ;数据 库 测试 .服务 器 测试 。 

(2) 按 测试 目的 分 类 ,有 : 

。 集成 测试 : 完成 系统 内 单元 之 间接 口 和 将 单元 集 组 装 成 为 一 个 完整 系统 的 测试 。 
功能 测试 ,也 称 正确 性 测试 : 验证 每 个 功能 是 否 按照 事先 定义 的 要 求 那样 正常 
工作 。 
压力 测试 ,也 称 负载 测试 : 用 来 检查 系统 在 不 同 负载 (如 数据 量 、 并 发 用 户 、 连 接 
数 等 ) 条 件 下 的 系统 运行 情况 ,特别 是 高 负载 .极限 负载 下 的 系统 运行 情况 ,以 发 
现 系 统 不 稳定 、 系 统 性 能 瓶颈 、 内 存 泄漏 .CPU 使 用 率 过 高 等 问题 。 

性 能 测试 : 测定 系统 在 不 同 负载 条 件 下 的 具体 的 性 能 指标 。 

可 靠 性 测试 : 包括 强壮 性 测试 和 异常 处 理 测试 。 检 验 系统 是 否 能 保持 长 期 稳定 、 
正常 的 运行 ,如 确定 正常 运行 时 间 , 即 平均 失效 时 间 。 

灾难 恢复 性 测试 : 在 系统 崩溃 、 硬 件 故障 或 其 他 灾难 发 生 之 后 ,重新 恢复 系统 和 
数据 的 能 力 测试 。 

安全 性 测试 : 测试 系统 在 应 对 非 授权 的 内 部 /外 部 访问 、 故 意 损坏 时 的 系统 防护 
能 力 。 

兼容 性 测试 : 测试 在 不 同 运 行 环境 (网 络 硬件、 第 三 方 软件 等 ) 下 的 实际 表现 。 
回归 测试 : 为 保证 软件 中 新 的 变化 (新 增加 的 代码 、 代 码 修改 等 ) 不 会 对 原 有 功能 
的 正常 使 用 有 影响 而 进行 的 测试 。 

验收 测试 : 验证 是 否 是 用 户 真正 需要 的 产品 特性 。 

安装 测试 : 验证 系统 是 否 能 按照 安装 说 明 书 成 功 地 完成 系统 的 安装 。 

GB/T8566 一 2001 将 测试 的 类 别 分 为 单元 测试 .集成 测试 、 配 置 项 (确认 ) 测 试 、 系 统 
测试 、 验 收 测试 和 回归 测试 。 回 归 测 试 可 出 现在 其 他 各 个 测试 类 别 中 。 

此 外 ,根据 测试 过 程 中 被 测 软 件 是 否 被 执行 ,软件 测试 可 分 为 静态 测试 和 动态 测试 。 
动态 测试 是 在 系统 运行 时 进行 测试 。 根 据 是 否 针对 系统 的 内 部 结构 和 具体 实现 算法 来 完 
成 测试 ,软件 测试 可 分 为 白 盒 测 试 和 黑 盒 测 试 。 白 盒 测试 需要 了 解 系统 的 内 部 结构 和 具 
体 实 现 。 


1.3.4 基于 软件 活动 的 测试 级 别 


实际 上 ,不 同 的 测试 级 别 ,伴随 着 不 同 的 软件 开发 活动 。 图 1-8 展示 了 各 个 测试 级 别 
的 一 个 典型 场景 ,以 及 这 些 测试 级 别 与 分 步 的 软件 开发 活动 是 如 何 分 别 对 应 关联 的 。 每 
个 测试 级 别 中 的 信息 都 典型 地 由 相应 关联 的 开发 活动 所 派生 出 来 。 综 合 与 分 析 这 些 活动 
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可 以 广泛 地 应 用 于 任何 开发 过 程 。 通 常 ,我 们 建议 在 开发 每 个 活动 的 同时 就 把 相应 的 测 
试用 例 设 计 好 ,尽管 在 编码 实现 阶段 以 前 软件 还 是 不 可 执行 的 。 明 确 、 清 晰 地 说 明 测 试 的 
流程 可 以 识别 设计 决策 的 缺陷 。 


| 有 
体系 结构 | 一 一 | 系统 测试 
La 集成 测试 
详细 设计 | 
-a 


1-8 ”软件 开发 活动 与 测试 级 别 的 “V 模型 ” 


软件 开发 过 程 的 需求 分 析 阶 段 是 为 了 捕捉 用 户 的 需求 ,而 设计 验收 测试 是 为 了 确定 
软件 产品 事实 上 是 否 满 足 了 这 些 需 求 。 验 收 测试 必须 有 用 户 或 那些 拥有 很 好 的 领域 背景 
知识 的 其 他 人 员 参 加 。 

软件 开发 过 程 的 体系 结构 设计 阶段 主要 任务 是 选择 构件 (组 件 ) 和 连接 器 ,两 者 结合 
起 来 实现 一 个 系统 ,以 便 符合 先前 所 确定 的 需求 。 设 计 系 统 测试 是 为 了 确定 集成 后 的 完 
整 系统 是 否 与 设计 规约 相 一 致 。 系 统 测试 假设 各 个 部 分 单独 工作 正常 ,而 进一步 了 解 系 
统 作为 一 个 整体 是 否 工作 正常 。 这 一 级 别 的 测试 通常 是 为 了 寻找 设计 中 存在 的 问题 ,由 
独立 的 测试 组 来 完成 。 

软件 开发 过 程 的 子 系统 设计 阶段 详细 说 明子 系统 的 结构 和 行为 ,每 个 子 系统 分 别 实 
现 整 个 体系 结构 中 的 某 部 分 的 功能 。 通 常 , 子 系统 采用 之 前 已 开发 好 的 软件 。 设 计 集成 
测试 是 为 了 评估 子 系统 内 模块 之 间接 口 是 否 一 致 .通信 是 否 正确 ,其 前 提 是 各 个 模块 能 正 
确 工作 。 集 成 测试 通常 由 开发 组 成 员 负 责 。 

软件 开发 过 程 的 详细 设计 阶段 确定 各 个 模块 的 结构 和 行为 。 一 个 程序 单元 (unit) 或 
过 程 (procedure) 是 由 一 个 或 多 个 连续 的 程序 语句 组 成 ,并 有 一 个 名 字 , 软 件 其 他 部 分 使 
用 该 名 字 对 程序 单元 进行 调用 。 在 C 和 C++ 中 单元 被 称 为 函数 ,在 Java 中 称 为 方法 ,在 
FORTRAN 中 称 为 子 例 程 。 

将 一 系列 相关 联 的 单元 组 合 在 一 个 文件 、 包 或 者 类 中 ,就 称 为 一 个 模块 。 模 块 相当 于 
C 中 的 文件 ,C++ 和 Java 中 的 类 。 设 计 模块 测试 是 为 了 独立 评估 各 个 模块 ,包括 组 件 单 
元 间 如 何 相 互 作用 ,以 及 关联 的 数据 结构 。 大 多 数 软件 开发 组 织 将 模块 测试 的 职责 交 给 
程序 员 。 

软件 开发 过 程 的 实现 阶段 是 实际 产生 代码 的 阶段 。 设 计 单元 测试 是 为 了 评定 实现 阶 
段 所 产生 的 单元 的 正确 性 , 它 是 最 底层 的 测试 。 有 些 时 候 , 比 如 在 建 一 些 通 用 的 库 模 块 
时 ,单元 测试 无 需 封装 软件 应 用 的 知识 。 跟 模块 测试 一 样 ,大 部 分 软件 开发 组 织 会 把 单元 
测试 的 责任 交 给 程序 员 。 

图 1-7 中 没有 描述 回归 测试 , 它 是 软件 开发 维护 阶段 的 一 个 标准 部 分 。 回 归 测 试 是 
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在 对 软件 进行 一 些 修改 之 后 进行 的 测试 ,目的 在 于 确保 更 新 后 的 软件 仍然 具备 更 新 前 所 
拥有 的 功能 。 

在 需求 和 高 级 别 设计 中 存在 的 错误 会 导致 最 终 实现 的 程序 中 的 缺陷 ,通过 测试 可 以 
揭露 出 这 些 缺 陷 。 但 是 ,由 于 需求 和 设计 中 的 错误 而 导致 的 缺陷 ,常常 是 在 之 后 的 数 月 或 
数 年 内 通过 测试 才 发 现 ,这 些 错误 的 影响 往往 会 草 延 到 多 个 软件 构件 中 ,因此 ,这 样 的 错 
误 通 常 很 难 加 以 约束 并 且 修 正 的 代价 很 高 。 从 积极 的 一 面 看 ,即使 不 进行 测试 ,定义 测试 
用 例 的 过 程 本 身 就 已 经 可 以 鉴别 出 一 些 重大 的 需求 和 设计 错误 。 因 此 ,在 需求 分 析 和 设 
计 的 同时 就 并 行 地 推行 测试 计划 是 很 重要 的 。 在 标准 的 软件 实践 中 ,用 一 些 像 用 例 分 析 
(use case analysis) 这 样 的 技术 ,测试 计划 能 更 好 地 与 需求 分 析 相 结合 。 

此 外 ,面向 对 象 (Object-Oriented,OO) 软 件 改变 了 测试 的 分 级 。OO 软件 的 单元 和 
模块 间 界 限 模糊 ,因此 ,在 OO 软件 测试 中 ,方法 内 测试 是 为 各 个 独立 的 方法 构造 测试 , 方 
法 间 测 试 是 将 同一 个 类 里 的 成 对 方法 一 起 进行 测试 ,类 内 测试 是 针对 一 个 完整 的 类 构造 
的 测试 ,通常 是 顺序 调用 类 内 的 方法 ,类 间 测 试 是 同时 测试 多 个 类 。 前 3 个 属于 单元 和 模 
块 测试 ,而 类 间 测 试 是 一 种 集成 测试 。 


1.3.5 基于 测试 过 程 成 熟 度 的 Beizer 测试 级 别 


另 一 种 级 别 分 类 是 基于 一 个 组 织 的 测试 过 程 成 熟 度 水 平 ,每 个 级 别 体现 了 测试 工程 
师 的 不 同 测试 目的 。 

。 0 级 : 没有 区 分 测试 与 调试 。 

。 1 级: 测试 的 目的 是 证 明 软 件 能 用 。 

。 2 级 : 测试 的 目的 是 证 明 软件 不 能 用 。 

。3 级 : 测试 的 目的 不 是 为 了 具体 证 明 什么 ,而 是 为 了 降低 软件 使 用 的 风险 。 

。4 级 : 测试 是 一 种 智力 训练 ,能 够 帮助 专业 人 员 开 发 出 更 高 质量 的 软件 。 

0 级 测试 是 一 种 将 测试 等 同 地 视 为 调试 的 观点 。 许 多 计算 机 专业 的 学 生 都 抱 有 这 样 
的 看 法 。 在 一 些 专业 的 编程 课 上 ,学 生 编译 程序 后 ,随意 取 几 个 输入 值 调试 一 下 。 这 种 模 
型 并 不 区 分 一 个 程序 的 不 正确 行为 和 程序 中 的 错误 ,因而 对 于 软件 的 可 靠 性 和 安全 性 没 
有 多 大 帮助 。 

1 级 测试 的 目的 是 说 明正 确 性 。 相 对 原始 的 0 级 有 了 重要 提升 。 事 实 上 ,除了 非常 
小 的 程序 外 ,正确 性 其 实 是 根本 无 法 达到 或 证 明 的 。 正 因为 正确 性 这 个 目标 是 不 现实 的 ， 
测试 工程 师 往往 就 没有 严格 的 目标 或 正规 的 测试 技术 。 

2 级 测试 的 目的 是 找 出 错误 。 虽 然 找 错 显然 是 个 合理 的 目标 ,但 这 也 是 个 负面 目标 。 
测试 人 员 可 能 喜欢 找 出 问题 ,但 是 开发 人 员 却 不 希望 找 出 问题 一 一 他 们 和 希望 软件 能 正常 
工作 (开发 人 员 会 很 自然 采取 1 级 测试 的 思维 方式 )。 因 此 ,2 级 测试 会 将 测试 人 员 与 开 
发 人 员 放 在 对 立 的 位 置 上 。 

3 级 测试 的 想法 是 基于 这 样 的 认识 , 即 测试 能 够 展示 失败 的 存在 。 这 意味 着 必须 接 
受 这 样 的 事实 , 当 我 们 使 用 软件 时 ,必然 会 面临 一 些 风 险 。 风 险 可 能 比较 小 而 结果 也 并 不 
重要 的 ,风险 也 可 能 比较 大 而 后 果 是 灾难 性 的 ,但 无 论 如 何 风险 是 一 定 存 在 的 。 这 使 我 们 
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意识 到 整个 开发 团队 都 有 着 同样 的 目标 
人 员 和 开发 人 员 一 起 协同 工作 来 降低 风险 。 

一 旦 测试 人 员 与 开发 人 员 身 处 同一 个 “团队 ”中 ,组 织 就 可 以 向 真正 的 4 级 测试 前 进 。 
4 级 测试 是 将 测试 定义 为 一 种 提高 质量 的 智力 训练 。 提 高 质量 的 方式 有 多 种 ,创建 能 够 
使 软件 出 错 的 测试 用 例 只 是 其 中 之 一 。 有 了 这 样 的 思想 准备 ,测试 工程 师 就 可 以 成 为 项 
目的 技术 领队 了 (这 在 很 多 其 他 工程 学 科 中 很 普遍 )。 他 们 对 度量 和 提高 软件 质量 担负 着 
主要 责任 ,并 且 应 该 用 他 们 的 专业 才能 帮助 开发 人 员 。Beizer 把 这 比喻 为 一 个 拼写 检查 
器 。 人 们 常常 认为 拼写 检查 器 的 目的 是 找 出 拼 错 的 单词 ,但 事实 上 , 它 最 终 的 目的 是 提高 
我 们 的 拼写 能 力 。 每 次 用 拼写 检查 器 找到 一 个 拼 错 的 单词 ,我 们 都 获得 了 一 次 机 会 来 学 
习 如 何 正确 地 拼写 该 单词 。 拼 写 检查 器 是 拼写 质量 方面 的 “专家”。 同 样 ,4 级 测试 意味 
着 测试 的 目的 在 于 提高 开发 者 生产 高 质量 软件 的 能 力 , 测 试 人 员 应 该 训练 团队 的 开发 
人 员 。 


降低 使 用 软件 的 风险 。 在 3 级 测试 中 ,测试 


1.4 测试 的 基本 流程 与 原则 


软件 测试 的 基本 流程 包括 : 

(1) 设计 一 组 测试 用 例 。 每 个 测试 用 例 由 输入 数据 和 预期 输出 结果 两 部 分 组 成 。 

(2) 用 各 个 测试 用 例 的 输入 数据 实际 运行 被 测 程序 。 

(3) 检查 实际 输出 结果 与 预期 的 输出 结果 是 否 一 致 。 若 不 一 致 则 认为 程序 有 错 。 

通常 程序 输入 数据 的 可 能 值 的 个 数 很 多 ,再 加 上 程序 内 部 结构 的 复杂 性 ,要 彻底 地 测 
试 一 个 程序 是 不 可 能 的 。 我 们 只 能 执行 有 限 个 测试 用 例 ,并 求 尽 可 能 多 地 发 现 一 些 错误 。 
能 尽 可 能 多 地 发 现 错误 的 测试 用 例 被 称 为 是 “高 产 的 ”。 

软件 测试 的 一 些 基本 原则 如 下 : 

(1) 在 开始 测试 时 ,不 应 默认 程序 中 没有 错误 。 这 是 由 测试 的 定义 决定 的 。 测 试 前 
应 明确 程序 中 含有 错误 ,测试 的 目的 就 是 要 找 出 其 中 尽 可 能 多 的 错误 。 但 测试 一 般 不 可 
能 找 出 程序 中 的 所 有 错误 。 测 试 只 能 证 明 程 序 中 存在 错误 ,但 不 能 证 明 程 序 中 不 存在 
错误 。 

(2) 测试 不 应 由 编写 程序 的 个 人 或 小 组 来 承担 。 由 其 他 人 ( 非 程 序 本 身 的 编制 者 ) 
来 进行 测试 ,会 获得 更 好 的 效果 。 由 于 测试 的 目的 是 查 错 ,因此 ,大 多 数 程序 员 不 能 有 效 
地 测试 他 们 自己 的 程序 ,这 一 方面 是 由 于 心理 上 的 因素 , 另 一 方面 也 是 由 于 对 所 编制 程序 
的 理解 有 习惯 性 。 作 为 这 一 基本 原则 的 推论 , 则 最 好 由 程序 作者 之 外 的 其 他 人 ,或 更 一 般 
地 ,由 软件 系统 设计 编程 部 门 以 外 的 另 一 个 独立 部 门 来 进行 测试 ,但 查 出 错误 之 后 的 排 
错 , 仍 应 由 程序 的 原 编写 者 自己 进行 。 

(3) 测试 文件 必须 说 明 预 期 的 输出 结果 。 一 个 测试 用 例 不 仅仅 是 一 个 输入 数据 ,只 
有 把 输入 数据 和 预期 的 输出 结果 结合 起 来 才 形 成 一 个 完整 的 测试 用 例 。 

(4) 要 对 合理 的 和 不 合理 的 输入 数据 都 进行 测试 。 忽 略 后 一 种 情形 会 降低 程序 的 可 
靠 性 。 对 不 合理 的 输入 数据 程序 应 拒绝 执行 。 

(5) 除 检查 程序 功能 是 否 完备 外 ,还 应 检查 程序 功能 是 否 有 多 余 。 换 句 话 说 ,我 们 还 
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应 当 检 查 该 程序 是 否 产生 了 我 们 所 不 希望 的 副作用 。 

(6) 应 该 完整 地 保留 所 有 的 测试 文件 (包括 测试 数据 集 、 预 期 的 结果 程序 执 行 的 记 
录 等 等 ) ,直至 该 软件 产品 废弃 不 用 为 止 。 因 为 在 对 该 软件 产品 进行 维护 时 ,十 分 需要 这 
种 测试 文件 ,以 便 修改 后 再 测试 。 

(7) 一 个 模块 或 多 个 模块 中 有 错误 的 概率 与 已 发 现 错误 的 个 数 成 正比 。 


1.5 软件 测试 的 组 织 


对 每 个 软件 项 目 而 言 ,在 测试 开始 时 就 会 存在 固有 的 利害 关系 冲突 。 要 求 开 发 软件 
的 人 员 对 该 软件 进行 测试 ,这 本 身 似乎 是 没有 恶意 的 。 毕 况 , 谁 能 比 开 发 者 本 人 更 了 解 程 
序 呢 ? 遗憾 的 是 ,通常 开发 人 员 感 兴趣 的 是 急于 显示 他 们 所 开发 的 程序 是 无 错误 的 ,是 按 
照 客户 的 需求 开发 的 ,而 且 能 按照 预定 的 进度 和 预算 完成 。 这 些 利害 关系 会 影响 软件 的 
充分 测试 。 

从 心理 学 的 观点 来 看 ,软件 分 析 和 设计 (连同 编码 ) 是 建设 性 的 任务 。 软 件 工程 师 分 
析 、 建 模 , 然 后 编写 计算 机 程序 及 其 文档 。 与 其 他 任何 建设 者 一 样 ,软件 工程 师 也 为 自己 
的 “大 厦 " 感 到 骄 做, 而 碾 视 企图 拆 掉 大 厦 的 任何 人 。 当 测试 开始 时 ,有 一 种 微妙 的 但 确实 
存在 的 企图 ,试图 摧毁 软件 工程 师 所 建造 的 大 厦 。 以 开发 者 的 观点 来 看 ,可 以 认为 (心理 
学 上 ) 测 试 是 破坏 性 的 。 因 此 ,开发 者 精心 地 设计 和 执行 测试 ,试图 证 明 其 程序 的 正确 性 ， 
而 不 是 注意 发 现 错误 。 但 遗憾 的 是 ,错误 是 存在 的 ,而 且 , 即 使 软件 工程 师 没 有 找到 错误 ， 
客户 也 会 发 现 。 

软件 开发 人 员 总 是 要 负责 程序 各 个 单元 (构件 ) 的 测试 ,确保 每 个 单元 完成 其 功能 或 
展示 所 设计 的 行为 。 在 多 数 情况 下 ,开发 者 也 进行 集成 测试 。 集 成 测试 是 一 个 测试 步骤 ， 
它 将 给 出 整个 软件 体系 结构 的 构造 (和 测试 ) 。 只 有 在 软件 体系 结构 完成 后 ,独立 测试 组 
才 开 始 介 入 。 

独立 测试 组 (Independent Test Group,ITG) 的 作用 是 为 了 避免 开发 人 员 进 行 测试 所 
引发 的 固有 问题 ,独立 测试 可 以 消除 利益 冲突 。 然 而 ,在 整个 软件 项 目 中 ,开发 人 员 和 测 
试 组 要 密切 配合 ,以 确保 进行 充分 的 测试 。 在 测试 进行 的 过 程 中 ,必须 随时 可 以 找到 开发 
人 员 , 以 便 及 时 修改 发 现 的 错误 。 

从 分 析 与 设计 到 策划 和 制定 测试 规程 ,ITG 参与 整个 项 目 过 程 。 从 这 种 意义 上 讲 ， 
ITG 是 软件 开发 项 目 团队 的 一 部 分 。 然 而 ,在 很 多 情况 下 ,ITG 直接 向 软件 质量 保证 组 
织 报告 ,由 此 获得 一 定 程度 的 独立 性 。 如 果 ITG 是 软件 工程 组 织 的 一 部 分 ,这 种 独立 性 
将 是 不 可 能 获得 的 。 


1.6 测试 工程 师 的 职业 素养 


测试 人 员 是 测试 工作 中 最 有 价值 也 是 最 重要 的 资源 ,只 有 保证 测试 工程 师 具有 良好 
的 职业 素质 ,才能 保证 所 测试 产品 的 质量 。 
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1.6.1 测试 工程 师 的 工作 


测试 工程 师 是 专业 的 信息 技术 人 员 ,负责 一 到 多 项 技术 型 测试 活动 ,包括 设计 测试 输 
入 ,生成 测试 用 例 , 执 行 测试 脚本 ,分 析 测 试 结果 ,以 及 向 开发 人 员 和 经 理 报告 测试 结果 。 
参与 软件 开发 的 每 个 工程 师 在 某 些 时 候 都 扮演 着 测试 工程 师 的 角色 。 因 为 在 产品 开发 过 
程 中 所 产生 的 软件 工件 都 有 (或 应 该 有 ) 相 应 的 测试 用 例 集 ,而 最 适合 定义 这 些 测试 用 例 
的 通常 是 工件 的 设计 者 。 一 个 测试 经 理 负责 一 到 多 个 测试 工程 师 。 测 试 经 理 制 定 测试 策 
略 和 过 程 , 在 项 目 上 与 其 他 经 理 相互 合作 沟通 ,另外 还 会 帮助 测试 工程 师 们 工作 。 

图 1-9 说 明了 测试 工程 师 的 一 些 主 要 活动 。 测 试 工程 师 必须 创建 测试 需求 ,以 此 来 
设计 测试 用 例 。 这 些 需 求 之 后 会 转化 成 用 于 测试 执行 的 实际 值 和 脚本 。 这 些 可 执行 的 测 
试 是 在 软件 上 运行 的 ,在 图 中 用 P 表示 ,而 对 测试 结果 的 评估 决定 了 这 些 测试 是 否 揭露 
出 软件 的 错误 。 这 些 活 动 是 由 一 人 或 多 人 完成 的 ,测试 的 整个 过 程 由 测试 经 理 进行 监控 。 


测试 经 理 史 
一 一 
9 设计 | 测试 设计 实例 化 可 执行 的 
测试 工程 师 测试 工程 师 风 ZS 


an 
本 ~N 
CC) 一 -全 更 由 一 -|L Wt | 
图 1-9 测试 工程 师 的 活动 


测试 工程 师 最 有 力 的 工具 之 一 就 是 正式 的 覆盖 标准 。 正 式 的 覆盖 标准 给 测试 工程 师 
提供 方法 ,来 决定 在 测试 中 要 用 哪些 测试 输入 ,使 测试 人 员 更 有 可 能 发 现 程序 中 的 问题 ， 
并 且 能 够 对 软件 的 高 质量 和 高 可 靠 性 提供 更 强 有 力 的 保障 。 获 盖 标 准 也 为 测试 工程 师 提 
供 了 测试 停止 准则 。 


1.6.2 职业 和 道德 责任 


“职业 化 ?也 被 称 为 “职业 特性 "“ 职 业 作 风 ? 或 “专业 精神 等 ,通常 被 认为 是 从 业 人 
员 、 职 业 团体 及 其 服务 对 象 之 间 的 三 方 关系 准则 ,该 准则 是 从 事 某 一 职业 ,并 得 以 生存 和 
发 展 的 必要 条 件 。 具 体 到 某 一 个 行业 时 ,“ 职 业 化 ”还 应 考虑 其 自身 特殊 的 要 求 。 虽然 职 
业 道 德 规范 没有 法 律 法 规 所 具有 的 强制 性 ,但 遵守 这 些 规范 对 行业 的 健康 发 展 是 至 关 重 
要 的 。 

道德 准则 被 设计 来 帮助 计算 机 专业 人 士 决定 其 有 关 道 德 问题 的 判断 。 许 多 专业 机 构 
(诸如 美国 计算 机 协会 .英国 计算 机 协会 澳大利亚 计算 机 协会 以 及 美国 计算 机 伦理 研究 
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所 等 ) 都 颁布 了 道德 准则 ,每 种 准则 在 细节 上 存在 着 差别 ,但 是 为 专业 人 士 行为 提供 了 整 
体 指南 。 

美国 计算 机 伦理 研究 所 颁布 的 最 短 准 则 是 : 

(1) 不 要 使 用 计算 机 来 伤害 他 人 。 

(2) 不 要 干扰 他 人 的 计算 机 工作 。 

(3) 不 要 监控 他 人 的 文件 。 

(4) 不 要 使 用 计算 机 来 偷窃 。 

(5) 不 要 使 用 计算 机 来 提供 假 证 词 。 

(6) 不 要 使 用 或 者 复制 你 没有 付费 的 软件 。 

(7) 不 要 在 没有 获得 允许 的 情况 下 使 用 他 人 的 计算 机 资源 。 

(8) 不 要 咨 用 他 人 的 智能 成 果 。 

(9) 应 该 考虑 到 自己 所 编写 程序 的 社会 后 果 。 

(10) 使 用 计算 机 时 应 该 体现 出 对 信息 的 尊重 。 

美国 计算 机 协会 (ACMD) 为 专业 人 士 行为 制订 的 道德 准则 包含 21 条 ,包括 “美国 计算 
机 协会 成 员 必须 遵守 现 有 的 本 地 、 州 .地 区 、 国 家 以 及 国际 法 律 ,除非 有 明确 准则 要 求 不 必 

在 计算 机 日 益 成 为 各 个 领域 及 各 项 社会 事务 中 心 角 色 的 今天 ,那些 直接 或 间接 从 事 
软件 设计 和 软件 开发 的 人 员 ,有 着 既 可 从 善 也 可 从 恶 的 极 大 机 会 ,同时 还 可 影响 着 周围 其 
他 从 事 该 职业 的 人 的 行为 。 为 能 保证 使 其 尽量 发 挥 有 益 的 作用 ,这 就 必须 要 求 软件 工程 
师 致 力 于 使 软件 工程 成 为 一 个 有 益 的 和 受 人 尊敬 的 职业 。 为 此 ,1998 年 ,IEEE-CS 和 
ACM 联合 特别 工作 组 在 对 多 个 计算 学 科 和 工程 学 科 规范 进行 广泛 研究 的 基础 上 ,制订 
了 软件 工程 师 职业 化 的 一 个 关键 规范 (软件 工程 资格 和 专业 规范 )。 该 规范 不 代表 立法 ， 
它 只 是 向 实践 者 指明 社会 期 望 他 们 达到 的 标准 ,以 及 同行 们 的 共同 追求 和 相互 的 期 望 。 
该 规范 要 求 软件 工程 师 应 该 坚持 以 下 8 项 道德 规范 。 

原则 1: 公众 。 从 职业 角色 来 说 ,软件 工程 师 应 当 始 终 关注 公众 的 利益 ,按照 与 公众 
的 安全 ,健康 和 幸福 相 一 致 的 方式 发 挥 作用 。 

原则 2: 客户 和 雇主 。 软 件 工程 师 应 当 有 一 个 认 知 ,明确 什么 是 其 客户 和 雇主 的 最 大 
利益 。 他 们 应 该 总 是 以 职业 的 方式 担当 他 们 的 客户 或 雇主 的 忠实 代理 人 和 委托 人 。 

原则 3: 产品 。 软 件 工程 师 应 当 尽 可 能 地 确保 他 们 开发 的 软件 对 于 公众 雇主、 客户 
以 及 用 户 是 有 用 的 ,在 质量 上 是 可 接受 的 ,在 时 间 上 要 按期 完成 并 且 费 用 合理 ,同时 没有 
错误 。 

原则 4: 判断 。 软 件 工程 师 应 当 完 全 坚持 自己 独立 自主 的 专业 判断 并 维护 其 判断 的 
声誉 。 
原则 5: 管理 。 软 件 工程 的 管理 者 和 领导 者 应 当 通 过 规范 的 方法 赞成 和 促进 软件 管 
理 的 发 展 与 维护 ,并 鼓励 他 们 所 领导 的 人 员 履 行 个 人 和 集体 的 义务 。 

原则 6: 职业 。 软 件 工程 师 应 该 提高 他 们 职业 的 正直 性 和 声誉 ,并 与 公众 的 兴趣 保持 
一 致 。 
原则 7: 同事 。 软 件 工程 师 应 该 公平 合理 地 对 待 他 们 的 同事 ,并 应 该 采取 积极 的 步骤 
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支持 社团 的 活动 。 

原则 8: 自身。 软件 工程 师 应 当 在 整个 职业 生涯 中 积极 参与 有 关 职 业 规范 的 学 习 , 努 
力 提高 从 事 自己 的 职业 所 应 该 具有 的 能 力 , 以 推进 职业 规范 的 发 展 。 

另外 ,在 软件 开发 的 过 程 中 ,软件 工程 师 及 工程 管理 人 员 不 可 避免 地 会 在 某 些 与 工程 
相关 的 事务 上 产生 冲突 。 为 了 减少 和 妥善 地 处 理 这 些 冲突 ,软件 工程 师 和 工程 管理 人 员 
就 应 该 以 某 种 符合 道德 的 方式 行事 。1996 年 11 月 ,IEEE 道德 规范 委员 会 指定 并 批准 了 
《工程 师 基 于 道德 基础 提出 异议 的 指导 方针 草案 》, 草 案 提出 了 9 条 指导 方针 : 

(1) 确立 清晰 的 技术 基础 : 尽量 弄 清 事实 ,充分 理解 技术 上 的 不 同 观点 ,而 且 一 旦 证 
实 对 方 的 观点 是 正确 的 ,就 要 毫 不 犹 移 地 接受 。 

(2) 使 自己 的 观点 具有 较 高 的 职业 水 准 , 尽 量 使 其 客观 和 不 带 有 个 人 感情 色彩 ,避免 
涉及 无 关 的 事务 和 感情 冲动 。 

(3) 及 早 发 现 问题 ,尽量 在 最 低层 的 管理 部 门 解决 问题 。 

(4) 在 因为 某 事务 而 决定 单干 之 前 ,要 确保 该 事务 足够 重要 ,值得 为 此 冒险 。 

(5) 利用 组 织 的 争端 裁决 机 制 解决 问题 。 

(6) 保留 记录 ,收集 文件 。 当 认识 到 自己 处 境 严 峻 的 时 候 , 应 着 手 制作 日 志 , 记 录 自 
己 采 取 的 每 一 项 措施 及 其 时 间 ,并 备份 重要 文件 ,防止 突 发 事件 。 

(7) 辞职 : 当 在 组 织 内 无 法 化 解 冲突 的 时 候 ,要 考虑 自己 是 去 还 是 留 。 选 择 辞职 既 
有 好 处 也 有 缺点 ,作出 决定 之 前 要 慎重 考虑 。 

(8) 匿名 : 工程 师 在 认识 到 组 织 内 部 存在 严重 危害 ,而 且 公开 提请 组 织 的 注意 可 能 
会 招致 有 关 人 员 超 出 其 限度 的 强烈 反应 时 ,对 该 问题 的 反映 可 以 考虑 采用 匿名 报告 的 
形式 。 

(9) 外 部 介入 : 组 织 内 部 化 解 冲突 的 努力 失败 后 ,如 果 工 程 人 员 决定 让 外 界 人 员 或 
机 构 介入 该 事件 ,那么 不 管 他 是 否决 定 辞 职 ,都 必须 认真 考虑 让 谁 介 入 。 可 能 的 选择 有 : 
执法 机 关 、 政 府 官员 、 立 法 人 员 或 公共 利益 组 织 等 。 


1.6.3 软件 测试 工程 师 的 素质 


软件 测试 工作 是 一 项 技术 工作 ,例如 在 进行 集成 测试 和 功能 测试 时 ,测试 人 员 必 须 明 
白 被 测 软件 系统 的 实现 原理 方法 及 其 所 涉及 的 各 种 系统 平台 、 技 术 等 内 容 , 同 时 还 要 开 
发 相应 的 测试 脚本 、 测 试 工具 等 。 拥 有 编程 或 开发 经 验 的 测试 人 员 会 对 软件 开发 过 程 有 
更 深 的 理解 ,对 与 开发 人 员 项 目 经 理 的 沟通 和 测试 工作 改进 等 会 有 很 大 帮助 。 在 进行 性 
能 测试 .安全 性 测试 ` 可 靠 性 测试 和 兼容 性 测试 等 工作 时 ,要 求 测试 人 员 人 掌握 系统 架构 设 
计 、 系 统 特性 标识 .系统 环境 设置 等 方面 的 知识 。 测 试 方法 常常 需要 结合 黑 盒 测试 方法 、 
白 盒 测试 方法 或 开发 所 需 的 测试 工具 ,这 就 要 求 测试 人 员 具 有 一 定 的 编程 经 验 。 

对 软件 测试 人 员 的 要 求 ,虽然 在 程序 设计 能 力 方 面 会 不 同 于 对 程序 员 的 要 求 ,但 对 测 
试 人 员 在 沟通 能 力 、 理 解 能 力 、 分 析 问 题 能 力 等 方面 的 要 求 会 高 些 。 而 且 , 对 不 同 层 次 的 
测试 人 员 的 要 求 也 不 相同 。 例 如 : 数据 库 测试 工程 师 需 要 有 数据 库 设计 、 开 发 和 性 能 优 
化 等 能 力 ; 自 动 化 测试 工程 师 需 要 有 良好 的 编程 经 验 ;测试 组 长 除了 需要 有 良好 的 编程 经 
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验 , 测 试 经 验 之 外 ,还 需要 良好 的 项 目 管理 能 力 和 组 织 能 力 等 。 

对 于 软件 测试 人 员 来 说 ,除了 向 测试 职业 方向 发 展 (测试 经 理 、 测 试 总 监 等 ) 之 外 ,还 
比较 容易 向 质量 管理 ,过程 改进 和 项 目 管理 等 多 个 方向 发 展 。 例 如 ,软件 测试 更 强调 流程 
和 沟通 ,对 整个 软件 开发 过 程 各 个 环节 进行 跟踪 和 审查 等 ,及 时 发 现 问题 和 解决 问题 ,有 
利于 向 项 目 经 理 、 软 件 企业 高 层 管理 人 员 等 方向 发 展 。 另 外 ,数据 库 测试 人 员 很 容易 转 为 
数据 库 开发 人 员 数据库 管 理 员 (DBA) ,自动 化 测试 工程 师 可 以 转 为 开发 人 员 ,而 资深 的 
测试 工程 师 也 可 以 转 去 做 产品 经 理 。 

为 了 高 质量 地 完成 测试 任务 ,软件 测试 工程 师 应 具有 很 好 的 素质 和 能 力 ,包括 沟通 能 
力 \ 技 术 能 力 、 自 信心 .耐心 .怀疑 一 切 的 精神 、 勤 奋 精神 、 洞 察 力 、 适 度 的 好 奇 心 、 反 向 思维 
和 发 散 思维 能 力 ,记忆 力 等 ,甚至 需要 很 好 的 幽默 感 、 自 我 学 习 能 力 和 创新 能 力 。 

(1) 责任 感 。 测 试 人 员 需 要 高 度 的 责任 感 ,本 着 对 质量 一 丝 不 苟 的 追求 ,坚持 用 客户 
的 观点 看 待 问题 ,不 放 过 任何 一 个 可 能 存在 的 疑点 ,充分 关注 细节 。 也 只 有 上 有 具有 高 度 的 责 
任 感 ,才能 经 受 得 住 来 自 进度 或 其 他 方面 的 压力 ,始终 把 质量 放 在 第 一 ,以 保证 测试 工作 
的 充分 性 和 可 靠 性 。 

(2) 沟通 能 力 。 测 试 工程 师 需要 同 软件 开发 过 程 中 各 种 角色 进行 沟通 ,具有 与 技术 
(开发 者 ) 和 非 技术 人 员 ( 包 括 客户 \ 市 场 人 员 和 培训 人 员 等 ) 的 交流 能 力 。 和 用 户 沟通 的 
重点 是 了 解 系统 要 实现 哪些 功能 .哪些 功能 是 无 关 紧 要 的 ,应 尽量 不 使 用 专业 术语 ;而 和 
开发 者 交流 时 应 该 关心 技术 上 的 实现 ,常常 使 用 专业 术语 。 而 且 , 也 只 有 深入 沟通 ,才能 
完整 地 理解 用 户 的 需求 和 待 实现 的 产品 特性 ,才能 真正 掌握 产品 设计 和 实现 的 技术 细节 。 

由 于 测试 工作 本 身 的 一 个 重要 任务 ,就 是 找 出 程序 、 系 统 中 的 缺陷 ,有 些 开发 人 员 觉 
得 是 挑 毛病 ,这 时 和 开发 人 员 沟 通 更 需要 技巧 ,这 样 才能 将 与 开发 人 员 之 间 可 能 发 生 的 冲 
突 和 对 抗 减少 到 最 低 程度 。 测 试 人 员 应 该 把 精力 集中 在 查找 错误 上 面 , 而 不 是 找 出 由 哪 
个 开发 人 员 引 入 的 错误 , 即 测试 的 结果 是 针对 产品 ,而 不 是 针对 编程 人 员 ,使 用 一 种 公正 
和 公平 的 方式 指出 具体 错误 ,对 于 测试 工作 是 有 益 的 。 一 般 来 说 ,武断 地 对 产品 进行 攻击 
是 错误 的 。 

(3) 技术 能 力 。 软 件 测试 本 质 上 是 技术 性 工作 ,技术 是 其 基础 。 如 果 没 有 技术 ,就 只 
能 进行 黑 盒 的 功能 测试 ,有 些 测试 任务 就 无 法 实现 , 某 些 时 候 测试 效率 比较 低 , 个 人 的 发 
展 也 会 受到 限制 。 有 了 和 良好 技术 ,在 早期 就 可 以 和 开发 人 员 一 起 讨论 系统 架构 设计 ,验证 
系统 是 否 具有 可 测 性 ,发现 单 点 失效 、 性 能 瓶颈 等 设计 问题 。 有 了 良好 技术 ,就 可 以 开发 
所 需要 的 测试 工具 自动 化 测试 框架 和 自动 化 测试 脚本 等 。 技 术 能 力 ,不 局 限于 开发 经 
验 、 编 程 能 力 , 还 应 包括 操作 系统 配置 和 排 错 能 力 、 网 络 技术 等 。 

(4) 自信 心 。 测 试 工程 师 对 自己 所 持 有 的 正确 观点 要 有 足够 的 自信 心 。 如 果 缺 乏 信 
心 , 则 容易 受 开 发 人 员 的 影响 ,使 测试 工作 缺乏 独立 性 ,程序 中 的 漏洞 或 缺陷 就 容易 被 忽 
略 过 去 ,导致 软件 产品 质量 的 降低 。 

(5) 耐心 。 有 些 软件 测试 工作 需要 难以 置信 的 耐心 ,有 时 需要 花费 大 量 的 时 间 去 分 
离 ,识别 一 个 错误 ,需要 对 其 中 一 个 测试 用 例 运行 几 十 遍 , 甚 至 几 百 遍 , 了 解 错误 在 什么 特 
别 的 情况 下 才 发 生 。 测 试 人 员 需 要 保持 耐心 ,尤其 是 在 集中 注意 力 解决 困难 问题 的 时 候 ， 
特别 是 在 测试 执行 阶段 , 面 对 成 百 上 千 个 测试 用 例 ,要 一 个 个 去 执行 ,还 要 在 不 同 的 测试 
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环境 上 重复 ,耐心 是 必要 的 。 

(6) 怀疑 精神 。 可 以 预料 ,开发 人 员 会 尽 自己 最 大 的 努力 将 所 有 的 错误 解释 过 去 , 测 
试 人 员 在 耐心 听取 解释 的 时 候 , 还 要 保持 高 度 警惕 ,直到 自己 的 分 析 结 果 或 亲自 测试 之 
后 , 才 做 出 决定 。 有 时 ,对 一 些 功 能 的 设计 和 实现 ,可 以 持 怀疑 态度 ,看 看 是 否 有 更 好 的 实 
现 方法 ,可 以 和 产品 设计 人 员 、 开 发 人 员 进 行 更 深入 的 讨论 。 

(7) 适度 的 好 奇 心 。 开 发 测试 用 例 时 所 使 用 的 方法 ,需要 积极 探索 。 设 计 出 那些 导 
致 系统 边界 出 错 的 测试 用 例 ,往往 需要 一 定 的 好 奇 心 。 测 试 工程 师 在 审查 (需求 说 明 书 》 
时 ,可 以 与 开发 人 员 一 起 讨论 各 种 “假设 ”的 场景 ,并 在 大 脑 中 反复 演练 被 测试 系统 ,以 找 
到 可 能 出 现 的 例外 或 边界 问题 。 测 试 人 员 善 于 从 不 同 的 角度 来 进行 探索 性 测试 ,包括 采 
用 错误 猜测 法 ,设计 一 些 试图 破坏 系统 的 测试 用 例 。 

在 及 时 完成 测试 执行 任务 和 编写 灵活 高 效 的 测试 用 例 之 间 ,在 进度 的 压力 和 探究 错 
误 发 生根 源 之 间 ,优秀 的 测试 人 员 能 够 取得 平衡 。 怀 疑 精 神 和 好 奇 心 有 一 定 的 联系 ,都 需 
要 适度 。 

(8) 洞察 力 。 具 有 适度 的 怀疑 精神 和 好 奇 心 , 如 果 缺 乏 洞察 力 ,测试 能 力 还 会 受到 较 
大 的 限制 。 一 个 好 的 测试 工程 师 具 有 一 种 先天 的 敏感 性 ,并 且 能 尝试 着 通过 一 些 巧 妙 的 
变化 去 发 现 问题 。 例 如 ,测试 人 员 能 够 捕获 用 户 使 用 系统 的 一 些 特定 场景 ,发 现 一 些 隐 茂 
较 深 的 严重 缺陷 。 如 果 能 够 洞察 开发 人 员 的 弱点 或 系统 的 薄弱 环节 ,对 更 快 地 发 现 问题 
也 会 有 很 大 帮助 。 良 好 的 洞察 力也 有 助 于 识别 测试 的 风险 ,从 而 降低 测试 的 风险 ,确保 测 
试 项 目的 成 功 。 

(9) 反 向 思维 和 发 散 思 维 能 力 。 测 试 工程 师 应 想 尽 办 法 来 考虑 产品 可 能 出 现 失败 的 
各 种 方式 ,最 大 限度 地 暴露 其 存在 的 问题 ,用 严格 的 边界 条 件 来 检验 它 , 让 系统 经 受 压 力 
测试 ,或 者 是 强迫 它 处 理 * 不 可 能 发 生 的 错误。 所 有 这 样 的 负面 测试 都 需要 反 向 思维 和 
良好 的 发 散 思 维 能 力 。 

(10) 记忆 力 。 如 果 测 试 工程 人 员 有 能 力 将 以 前 曾经 遇 到 过 的 类 似 的 错误 从 记忆 深 
处 挖掘 出 来 ,这 对 以 后 的 测试 有 很 大 帮助 ,因为 不 少 错误 是 由 开发 人 员 的 不 良 习 惯 导致 
的 。 在 测试 一 个 产品 的 新 版 本 时 ,如 果 清 楚 已 发 布 的 各 种 版 本 的 产品 功能 ,就 比较 容易 了 
解 新 版 本 的 功能 做 了 哪些 改动 .为 什么 改 、 这 样 改 了 之 后 会 对 其 他 特性 有 哪些 影响 等 一 系 
列 问题 。 如 果 熟 悉 软件 各 种 老 版 本 所 出 现 的 缺陷 ,就 有 助 于 对 新 版 本 的 用 例 设 计 和 测试 
执行 。 


1.7 全 国 计 算 机 等 级 考试 (四 级 ) 一 一 软件 测试 工程 师 


全 国 计 算 机 等 级 考试 (National Computer Rank 
Examination, NCRE) 是 经 原 国 家 教委 ( 现 教育 部 ) 批 准 、 由 教 


育 部 考试 中 心 主办 ,面向 社会 ,用 于 考查 应 试 人 员 计 算 机 应 
用 知识 与 能 力 的 全 国 性 计算 机 等 级 水 平 考 试 体系 。 NAT 


级 考试 


举办 全 国 计 算 机 等 级 考试 目的 在 于 推进 计算 机 知识 的 “本 汪 则 本 省 
普及 ,促进 计算 机 技术 的 推广 应 用 ,以 适应 经 济 建设 的 需要 ,为 用 人 部 门 录用 和 考核 工作 
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人 员 服 务 。 该 考试 面向 社会 ,服务 于 劳动 力 市 场 .为 人 员 择 业 、 人 才 流 动 提供 其 计算 机 应 
用 知识 与 能 力 的 证 明 , 以便 用 人 部 门 录用 和 考核 工作 人 员 时 有 一 个 统一 、 客 观 、 公 正 的 
标准 。 

教育 部 考试 中 心 聘请 全 国 著名 计算 机 专家 组 成 “全 国 计 算 机 等 级 考试 委员 会 ”, 负 责 
设计 考试 ,审定 考试 大 纲 .试题 及 评分 标准 。 教 育 部 考试 中 心 组 织 实 施 该 项 考试 ,组 织 编 
写 考试 大 纲 及 相应 的 辅导 材料 、 命 制 试卷 ,研制 上 机 考试 和 考 务 管理 软件 ,开展 考试 研究 
等 。 教 育 部 考试 中 心 在 各 省 (自治 区 直辖市) 设立 省 级 承办 机 构 , 各 省 (自治 区 .直辖 市 ) 
承办 机 构 根 据 教 育 部 考试 中 心 的 规定 设立 考点 ,组 织 考试 。 考 生 在 考点 报名 考试 ,获取 
成 绩 通知 单 和 合格 证 书 。 

此 项 考试 根据 各 工作 岗位 使 用 计算 机 的 不 同 要 求 , 分 为 4 个 等 级 。 其 中 “四 级 ”分 为 
软件 测试 工程 师 ,数据 库 工程 师 和 网 络 工程 师 3 科 。 

“软件 测试 工程 师 ” 考 核 软 件 测试 的 基本 概念 ,结构 柳 盖 测试 、 功 能 测试 .单元 测试 , 集 
成 测试 .系统 测试 .性 能 测试 ,可靠 性 测试 .面向 对 象 软件 测试 .Web 应 用 软件 测试 以 及 兼 
容 性 测试 .构件 测试 .极限 测试 和 文档 测试 等 。 考 生 要 能 结合 软件 测试 过 程 管理 平台 和 软 
件 分 析 与 测试 工具 ,增加 软件 测试 工程 的 实践 经 验 ,胜任 软件 测试 岗位 的 要 求 。 

全 国 计 算 机 等 级 考试 采用 全 国 统一 命题 ,统一 考试 ,笔试 和 上 机 操作 考试 相 结合 的 形 
式 。 目 前 ,四 级 的 3 个 科目 暂 不 考 上 机 ,笔试 时 间 为 120 分 钟 。 四 级 软件 测试 工程 师 的 笔 
试 考试 题 型 为 : 选择 题 25 题 (50%) 和 论述 题 3 题 (50%)。 

全 国 计 算 机 等 级 考试 每 年 考 两 次 。 上 半年 笔试 考试 时 间 为 3 月 最 后 一 个 星期 六 上 午 
9:00, 下 半年 笔试 考试 时 间 为 9 月 倒数 第 二 个 星期 六 上 午 9:00, 上 机 考试 从 笔试 的 当天 
下 午 开 始 (一 级 上 机 考试 从 上 午 开 始 ) ,期 限定 为 5 天 (至 周三 ) ,由 考点 具体 安排 。 

每 次 考试 报名 的 具体 时 间 由 各 省 (自治 区 直辖市) 省 级 承办 机 构 规定 。 考 生 不 必 上 先 
通过 第 一 (二 三) 级 再 报考 第 二 (三 、 四 ) 级 ,可 任 选 其 中 一 个 等 级 报考 。 如 果 一 个 级 别 中 
有 不 同类 别 ,考生 必须 选择 其 中 一 类 。 如 考生 在 前 一 次 考试 只 通过 笔试 或 上 机 中 的 一 科 ， 
在 本 次 报名 时 可 以 凭单 科 成 绩 单 免 考 该 科目 ,保留 成 绩 仅 保留 一 次 。 一 般 四 级 只 可 在 部 
分 考点 报名 考试 ,请 留意 当地 教育 考试 部 门 发 布 的 计算 机 等 级 考试 报考 简章 。 

全 国 计 算 机 等 级 考试 合格 证 书 用 中 、 英 两 种 文字 书写 ,全 国 通用 。 它 是 持 有 人 计算 机 
应 用 知识 和 能 力 的 证 明 , 可 供用 人 部 门 录用 和 考核 工作 人 员 时 参考 。 成 绩 合格 者 由 教育 
部 考试 中 心 颁发 合格 证 书 。 成 绩 均 优秀 者 .合格 证 书 上 注 明 *“ 优 秀 ” 字 样 。 

等 级 考试 的 证 书 是 终身 有 效 ,等 级 考试 的 大 岗 会 在 每 两 至 三 年 更 新 一 次 ,但 更 新 并 不 
影响 以 前 证 书 的 效力 。 


1.8 习题 


请 参考 课文 内 容 以 及 其 他 资料 ,完成 下 列 选 择 题 。 

(1) 软件 测试 的 目的 是 (  )。 
A. 软件 编写 完成 以 后 的 后 续 工 作  B. 寻找 软件 缺陷 而 执行 程序 的 过 程 
C. 使 软件 能 更 好 工作 D. 保证 程序 能 完全 正确 地 被 执行 
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(2) Myers 在 1979 年 提出 了 一 个 重要 观点 , 即 软件 测试 的 目的 是 为 了 ( ba 


A. 证 明 程 序 正确 B. 查找 程序 错误 
C. 改正 程序 错误 D. 验证 程序 无 错误 
(3) 程序 独立 测试 的 人 员 应 是 ( Ne 
A. 程序 员 自 己 B. 同一 开发 组 的 测试 成 员 
C. 第 三 方 测试 人 员 D. 同一 开发 组 的 其 他 成 员 


(4) 如 果 一 个 软件 产品 的 功能 或 特性 没有 实现 ,包括 主要 功能 部 分 丢失 、 次 要 功能 完 
全 丢失 或 错误 的 声明 ,这 是 属于 软件 缺陷 级 别 中 的 ( )s 
A. 致命 的 缺陷 ” B. 严重 的 缺陷 ” C. 一 般 的 缺陷 ”D. 微小 的 缺陷 
(5) 下 列 有 关 软 件 测试 的 叙述 中 ,正确 的 是 ( js 
A. 测试 是 软件 开发 中 一 个 单独 的 阶段 ,其 目的 是 对 已 实现 的 程序 编码 进行 正确 
性 检验 
B. 一 个 成 功 的 测试 能 够 验证 程序 的 确 做 了 它 应 该 做 的 事情 
C. 根据 80/20 原则 ,优秀 的 软件 开发 人 员 所 编写 的 程序 错误 少 ,因此 对 于 他 们 
的 程序 重点 不 应 放 在 缺陷 测试 上 
D. 在 软件 过 程 的 早期 寻找 尽 可 能 多 的 错误 符合 软件 测试 的 原则 
(6) 下 列 关于 测试 设计 与 开发 的 说 法 中 不 正确 的 是 ( 沁 
A. 软件 测试 设计 与 开发 活动 是 软件 测试 过 程 中 对 技术 要 求 比较 高 的 关键 阶段 
B. 软件 测试 设计 与 开发 主要 包括 测试 技术 方案 的 制订 、 测 试用 例 设计 
C. 测试 用 例 特定 集合 的 设计 ,测试 开发 和 测试 环境 的 设计 ,这 些 都 是 软件 测试 
设计 与 开发 的 范畴 
D. 测试 设计 与 开发 活动 对 软件 进行 需求 确定 性 估算 
(7) 如 果 软 件 出 现 修改 设计 的 严重 错误 ,那么 软件 质量 和 可 靠 性 就 不 能 保证 ,应 对 软 
件 进一步 测试 。 如 果 经 过 测试 ,软件 功能 完善 ,错误 率 数据 很 少 ,并 易于 修改 ,可 能 的 结果 
是 ( ) 
A. 软件 的 质量 和 可 靠 性 可 以 接受 B. 所 做 的 测试 不 充分 
C. 先前 做 出 的 改正 是 错误 的 D. A 或 者 B 
(8) 经 验 表明 ,在 程序 测试 中 某 模块 与 其 他 模块 相 比 , 若 该 模块 已 发 现 并 改正 的 错误 
数目 较 多 , 则 该 模块 中 残存 的 错误 数目 与 其 他 模块 相 比 通常 应 该 ( ss 
A. 较 少 B. 较 多 C. 相似 D. 不 确定 
(9) 对 程序 中 已 发 现 的 错误 进行 错误 定位 和 确定 出 错 性 质 , 并 改正 这 些 错 误 同 时 修 
改 相关 的 文档 , 称 为 ( Bs 
A. 测试 B. 调试 C. 错误 分 析 D. 验证 
(10) 软件 生存 周期 过 程 中 ,修改 错误 代价 最 大 的 阶段 是 ( $s 
A. 需求 阶段 B. 设计 阶段 C. 编程 阶段 D. 发 布 运 行 阶段 
(11) 下 面 有 关 测 试 原则 的 说 法 中 正确 的 是 ( 和 


软件 测试 概述 


A. 测试 用 例 应 由 测试 的 输入 数据 和 预期 的 输出 结果 两 部 分 组 成 
B. 测试 用 例 只 需 选 取 合理 的 输入 数据 

C. 程序 最 好 由 编写 该 程序 的 程序 员 自己 来 测试 

D. 使 用 测试 用 例 进行 测试 是 为 了 检查 程序 是 否 做 了 它 应 该 做 的 事 


(12) 软件 测试 的 目的 是 ( 。 ”)。 软 件 排 错 的 目的 是 ( 。 ”)。 
A. Q@ 证 明 程 序 中 没有 错误 @ 发 现 程序 中 的 错误 
@ 测量 程序 的 动态 特性 @ 检查 程序 中 的 语法 错误 
B. @ 找 出 错误 所 在 并 改正 之 @ 排除 存在 错误 的 可 能 性 
@ 对 错误 性 质 进行 分 类 @ 统计 出 错 的 次 数 


(13) 从 下 列 关于 软件 测试 的 叙述 中 , 选 出 3 条 正确 的 叙述 。( ) 
Q@ 测试 最 终 是 为 了 证 明 程序 没有 错误 
@ 在 进行 同等 测试 后 , 若 发 现 A 部 分 有 错 并 改正 了 10 个 错误 ,B 部 分 发 现 并 
改正 了 5 个 错误 , 则 再 进行 测试 时 ,A 部 分 中 发 现 错误 的 可 能 性 比 B 部 分 
中 大 
@ 对 一 个 模块 测试 的 根本 依据 是 测试 用 例 
@ 据 统计 ,通常 软件 测试 的 费用 约 占 软件 开发 费用 的 1/2 
@ 对 程序 的 穷 举 性 测试 在 一 般 情况 下 是 可 以 做 到 的 
(14) 以 下 哪 一 种 选项 不 属于 软件 缺陷 ?( ) 
A. 软件 没有 实现 产品 规格 说 明 所 要 求 的 功能 
B. 软件 中 出 现 了 产品 规格 说 明 不 应 该 出 现 的 功能 
C. 软件 实现 了 产品 规格 说 明 没 有 提 到 的 功能 
D. 软件 实现 了 产品 规格 说 明 所 要 求 的 功能 ,但 因 受 性 能 限制 而 未 考虑 可 移植 
性 问题 
(15) 软件 验证 和 确认 理论 是 测试 过 程 的 理论 依据 ,其 中 验证 是 检查 我 们 是 否 正在 正 
确 地 建造 一 个 产品 , 它 强 调 的 是 (  )。 


A. 过 程 的 正确 性 B. 产品 的 正确 性 
C. 测试 的 正确 性 D. 规格 说 明 的 正确 性 
(16) 软件 验证 和 确认 是 保证 软件 质量 的 重要 措施 , 它 的 实施 应 该 针对 ( ” 
A. 程序 编写 阶段 B. 软件 开发 的 所 有 阶段 
C. 软件 调试 阶段 D. 软件 设计 阶段 


(17) 可 跟踪 性 分 析 是 一 种 重要 的 软件 验证 和 确认 方法 。 不 属于 可 跟踪 性 分 析 的 活 
动 是 ( » 
. 正确 标识 在 需求 规格 说 明 中 的 每 项 需求 
从 需求 规格 开始 的 正 向 跟踪 应 确保 完全 支持 需求 规格 
每 个 当前 阶段 产品 的 规格 或 特性 应 确保 被 可 跟踪 的 前 驱 规 格 所 支持 
.确保 所 有 不 同 接 口 规格 说 明 的 完整 性 


AP 
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1.9 实验 与 思考 
1.9.1 实验 目的 

本 节 “ 实 验 与 思考 ”的 目的 : 

(1) 熟悉 软件 测试 技术 的 基本 概念 和 基本 内 容 。 

(2) 通过 因特网 (Internet) 搜索 与 浏览 ,了 解 网 络 环境 中 主流 的 软件 测试 技术 网 站 ， 
掌握 通过 专业 网 站 不 断 丰 富 软 件 测 试 技术 最 新 知识 的 学 习 方 法 ,尝试 通过 专业 网 站 的 辅 
助 与 支持 来 开展 软件 测试 技术 应 用 实践 。 

1.9.2 工具 /准备 工作 


在 开始 本 实验 之 前 ,请 认真 阅读 课程 的 相关 内 容 。 
需要 准备 一 台 带 有 浏览 器 能够 访问 因特网 的 计算 机 。 


1.9.3 实验 内 容 与 步骤 


1) 概念 理解 。 
(1) 请 根据 你 的 理解 和 看 法 ,给 出 “软件 测试 "的 定义 : 


(2) 软件 测试 领域 的 先驱 Bill Hetzel 博士 1983 年 为 软件 测试 给 出 的 定义 是 : 


Bill Hetzel 的 观点 受到 了 业界 一 些 权 威 的 质疑 和 挑战 ,其 中 ,1979 年 Glenford J]， Myers 给 
出 了 软件 测试 的 不 同 定义 : 


试 简单 分 析 关于 软件 测试 这 两 种 观点 的 不 同 特点 。 


(3) 请 简单 分 析 各 种 软件 特性 (比如 信息 隐蔽 、 耦 合 性 内 聚 性 、 程 序 长 度 以 及 复杂 性 
度量 ) 对 一 个 模块 的 可 测试 性 的 影响 。 你 能 否 制定 一 些 准则 ,使 所 设计 的 模块 便于 测试 ? 
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(4) 请 简单 表述 软件 测试 工程 师 所 需要 具备 的 基本 职业 素质 。 


2) 上 网 搜索 和 浏览 。 
看 看 哪些 网 站 在 支持 软件 测试 的 技术 工作 。 请 在 表 1-1 中 记录 搜索 结果 。 


表 1-1 软件 测试 技术 专业 网 站 实验 记录 
网 站 名 称 网 址 主要 内 容 描述 


你 习惯 使 用 的 网 络 搜索 引擎 是 : 
你 在 本 次 搜索 中 使 用 的 关键 词 主要 是 : 


提示 : 一 些 软件 测试 技术 的 专业 网 站 的 例子 包括 : 
http://www. 5l1testing. com (软件 测试 网 ) 
http://www. testage. net (测试 时 代 ) 
http://testing. csdn. net (CSDN- 软 件 测试 频道 ) 
http://testing. csai. cn ( 希 赛 网 -软件 测试 频道 ) 
http://www.iceshi. com (中 国 软 件 测试 联盟 ) 
http://www. 17testing. com (一 起 测试 网 ) 
http://www. btesting. com (北大 测试 ) 
http://www. cntesting. com (中 国 软件 测试 基地 ) 
http://www. cstc. org. cn (中国 软件 评测 中 心 ) 
http://www. rjzl. gov. cn (中 国 软件 质量 网 ) 

请 记录 : 在 本 实验 中 你 感觉 比较 重要 的 2 个 软件 测试 技术 专业 网 站 是 : 


(1) 网 站 名 称 : 

(2) 网 站 名 称 : 

请 分 析 : 你 认为 软件 测试 技术 专业 网 站 当前 的 技术 热点 是 : 
(1) 名 称 : 


技术 热点 : 
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1.9.4 实验 总 结 


1.9.5 实验 评价 (教师 ) 


1.10 阅读 与 分 析 : 从 程序 员 到 软件 测试 工程 师 


国内 软件 公司 对 软件 测试 的 态度 令 人 担忧 。 软 件 测试 工程 师 不 足 , 开 发 测试 人 员 比 
例 不 合理 。 据 调查 ,最 好 的 企业 中 测试 人 员 和 开发 人 员 的 比例 是 1 : 8, 有 的 是 1: 20, 有 
的 甚至 没有 专职 的 测试 工程 师 。 

曾经 参与 微软 Windows 95、Exchange Server 4. 0 和 4. 5、Internet Explorer 4.0 和 
5.0、SQL Server 2000 开发 与 测试 工作 的 陈 宏 刚 博士 ,尽管 已 经 升任 微软 亚洲 研究 院 商 
务 及 高 校 关 系 高 级 经 理 , 但 仍然 对 国内 软件 测试 水 平 的 落后 深 有 感触 。 

国内 很 多 企业 还 处 在 探索 阶段 ,小 企业 的 运作 方式 造成 其 主要 精力 是 要 尽快 完成 初 
始 资本 积累 。 有 些 企 业 也 了 解 软 件 测试 的 重要 性 ,很 努力 、 很 认真 地 在 学 ,但 因为 很 多 原 
因而 学 不 到 精 散 ,不 知道 如 何 去 做 。 于 是 只 能 局 限于 书本 上 学 来 的 简单 的 黑箱 、 白 箱 测 试 
而 已 。 很 多 人 知道 有 压力 测试 和 性 能 测试 ,但 针对 产品 具体 如 何 去 做 就 不 清楚 了 。 

陈 宏 刚 表示 ,重视 测试 首先 需要 有 开放 性 的 软件 文化 ,而 在 很 多 公司 中 ,测试 工程 师 
只 是 绝对 服从 的 听命 角色 ,没有 开发 他 们 的 积极 性 和 创造 性。 一些 管理 人 员 对 软件 开发 


22 


软件 测试 概述 


的 流程 管理 经 验 不 足 , 仍 然 用 传统 企业 的 方法 进行 管理 ,再 加 上 对 软件 质量 的 控制 理解 不 
对 ,认为 编 完 程序 经 过 程序 员 自 己 简单 的 测试 就 可 以 使 用 了 ,而 没有 认识 到 软件 测试 是 控 
制 质量 最 好 的 方法 。 

不 过 ,国内 还 是 有 一 些 大 型 公司 和 专业 公司 已 经 在 软件 测试 方面 走 上 正轨 ,1994 年 
开始 接 包 IBM 软件 测试 项 目 ,1999 年 软件 测试 成 为 公司 主体 软件 外 包 业 务 之 一 的 和 腾 
软件 就 是 其 中 之 一 。 因 为 客户 就 是 IBM 这 样 的 大 型 软件 公司 ,和 腾 软 件 高 级 副 总 裁 刘 忠 
表示 ,他 们 在 软件 测试 管理 上 , 同 国外 的 公司 相差 不 大 ,同时 也 研究 和 应 用 了 多 种 软件 测 
试 技术 。 

软件 测试 工程 师 


一 提 到 软件 测试 工程 师 , 很 多 人 就 会 想到 那些 反复 使 用 软件 ,试图 在 频繁 操作 中 寻找 
到 错误 发 生 的 低层 次 人 员 或 者 软件 用 户 。 其 实 这 是 一 种 错误 的 概念 ,软件 测试 早已 超越 
了 通过 用 户 使 用 来 发 现 Bug 的 基本 测试 阶段 。 

陈 宏 刚 介绍 说 ,微软 的 软件 测试 工程 师 分 为 3 种 : 测试 执行 者 (Basic Software 
Tester) ,测试 工具 软件 开发 工程 师 (Software Development Engineer in Test) 和 高 级 软件 
测试 工程 师 (Ad_hoc Tester) 。 

测试 执行 者 负责 理解 产品 的 功能 要 求 ,然后 根据 测试 规范 和 测试 案例 对 其 进行 测试 ， 
检查 软件 有 没有 错误 ,决定 软件 是 否 具有 稳定 性 ,属于 最 低级 的 执行 角色 。 

测试 工具 软件 开发 工程 师 负 责 写 测试 工具 代码 ,并 利用 测试 工具 对 软件 进行 测试 ,或 
者 开发 测试 工具 为 软件 测试 工程 师 服务 。 产 品 开发 后 的 性 能 测试 ,提交 测试 等 过 程 ,都 有 
可 能 要 用 到 开发 的 测试 工具 。 对 技术 要 求 最 强 的 是 这 些 人 ,因为 他 们 要 具备 写 程序 的 技 
术 。“ 因 为 不 同 产品 的 特性 不 一 样 , 对 测试 工具 要 求 也 是 不 同 的 ,就 像 Windows 的 测试 工 
具 不 能 用 于 Office,Office 的 也 不 能 用 于 SQL Server, 微 软 很 多 测试 工程 师 就 是 负责 专门 
为 某 个 产品 写 测试 程序 的 。” 

而 Ad_hoc Tester 属于 比较 有 经 验 , 自 己 会 找 方向 并 做 得 很 好 的 测试 工程 师 , 这 要 求 
有 具 有 很 强 的 创造 性 。 刚 进入 微软 时 ,老板 也 是 只 给 陈 宏 刚 一 个 操作 流程 ,每 天 就 按照 这 个 
规程 去 做 , 几 天 下 来 ,一 个 Bug 都 没有 发 现 。 陈 宏 刚 也 很 诅 两, 觉得 这 样 插 对 不 起 公司 ， 
后 来 自己 问 自己 :“ 为 什么 非 要 这 样 做 1” 于 是 换 了 其 他 的 方法 试 试 , 令 他 吃惊 的 是 ,一 下 
就 找到 很 多 严重 的 Bug, 当 时 也 不 敢 声 张 。 有 一 天 ,他 找到 10 多 个 非常 严重 的 Bug, 开 发 
经 理 一 下 就 惊 杂 了 ,怒气 冲冲 地 跑 到 陈 宏 刚 面前 问 :“ 你 是 不 是 改变 了 测试 方式 和 测试 步 
了 又?” 陈 宏 刚 有 些 吓 住 ,说道 :“ 可 能 改变 了 一 点 。" 对 方 说 :“ 我 非常 生气 ,但 我 不 是 生 你 的 
气 , 而 是 因为 以 前 测试 人 员 水 平 太 差 ,或 者 以 前 的 测试 方面 有 问题 ,软件 中 有 些 Bug 存在 
了 半年 甚至 一 年 ,但 直到 现在 才 发 现 ,现在 修补 这 些 错误 和 要 困难 很 多 1” 后 来 陈 宏 刚 得 到 了 
老板 的 赞许 ,可 以 按照 自己 的 想法 去 做 测试 。 对 此 , 陈 宏 刚 感 受 颇 深 :“ 一 方面 我 体会 到 
了 微软 非常 鼓励 创造 的 文化 ,同时 也 感到 只 遵守 教条 的 不 是 好 的 测试 人 员 ,那样 就 和 用 户 
一 样 了 。 做 软件 测试 工程 师 同样 需要 开拓 和 创造 性 。” 

在 开发 管理 上 ,测试 不 应 该 归属 于 项 目 管理 ,也 不 应 该 归属 开发 人 员 。 这 三 个 部 门 应 
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该 是 并 驾 齐 驱 、 相 互 协作 ,测试 工程 师 最 终 决定 产品 是 否 能 够 发 布 。 
软件 测试 工程 师 的 素质 


因为 软件 测试 仍然 处 在 发 展 阶段 ,还 没有 上 升 到 理论 层次 。 对 人 员 的 评测 ,包括 微软 
在 内 ,都 还 没有 一 个 统一 标准 ,因此 评定 软件 测试 工程 师 只 能 根据 工作 实践 进行 自然 
淘汰 。 

软件 测试 对 逻辑 思维 、 学 习 能 力 、 反 应 要 求 很 高 ,是 否 有 严密 的 思维 和 逆向 思维 也 非 
常 重要 。 陈 宏 刚 介绍 说 ,在 五 六 个 人 的 测试 小 组 时 ,一 半 以 上 的 Bug 都 是 他 找到 的 。 他 
认为 这 同 自己 数学 专业 的 背景 关系 密切 ,数学 中 有 逻辑 思维 的 培训 ,要 善于 找 出 来 各 方面 
的 因素 。 比 如 要 证 明 一 个 定理 ,各 个 方面 都 考虑 到 ,一 个 条 件 不 满足 就 无 法 证 明 ; 但 如 果 
证 明 其 不 成 立 ,最 常用 的 就 是 找到 一 个 反例 ,只 要 有 一 点 证 明 不 成 立 就 可 以 了 ,软件 测试 
也 是 找 这 一 点 。 

做 测试 还 要 考虑 到 所 有 出 错 的 可 能 性 ,还 要 做 一 些 不 是 按 常 规 做 的 、 非 常 奇 怪 的 事 。 
除了 漏洞 检测 ,测试 还 应 该 考虑 性 能 问题 ,也 就 是 要 保证 软件 运行 得 很 好 ,没有 内 存 泄漏 ， 
不 会 出 现 运行 越 来 越 慢 的 情况 ;在 不 同 的 使 用 环境 下 ,考虑 软件 的 兼容 性 同样 重要 。 软 件 
测试 与 产品 的 规模 也 有 很 大 的 关系 ,因为 软件 的 Bug 往往 出 在 大 型 软件 的 连接 处 。 

做 软件 测试 工程 师 需 要 对 软件 抱 有 怀疑 态度 。 这 是 因为 开发 人 员 喜 欢 想当然 ,总 是 
找 一 些 有 利于 自己 程序 执行 的 数据 ,有 些 开发 人 员 其 至 认为 不 利于 程序 执行 的 数据 是 对 
代码 的 正 污 和 砷 污 。 而 软件 测试 却 要 策略 性 地 准备 各 种 数据 ,从 每 个 细节 上 设计 不 同 的 
应 用 场景 ,不 去 想当然 地 假定 任何 一 个 数据 是 可 行 的 。 

在 职业 素质 和 交际 方面 ,并 不 是 测试 工程 师 爱 挑 别人 毛病 才 好 ,这 个 工作 反而 要 求 很 
强 的 沟通 能 力 。 经 常 和 开发 人 员 进 行 沟通 ,说 话 办 事 要 很 得 当 , 不 能 指责 别人 ,否则 会 事 
倍 功 半 。 性 格 随 和 才能 和 开发 人 员 顺 畅 地 沟通 ,对 人 和 对 事 是 完全 不 同 的 两 个 问题 。 


培养 优秀 的 软件 测试 工程 师 


朗 川 软件 测试 工程 师 张 建 阳 从 北大 力学 系 毕 业 之 后 , 曾 开发 流体 力学 分 析 软 件 ,软件 
缺少 测试 而 产生 的 问题 给 她 留 下 了 很 深 的 印象 。 后 来 去 大 唐 电 信 做 UIM( 统 一 消息 管理 
系统 ) ,她 发 现 尽 管 公 司 为 了 鼓励 员工 找 Bug 采取 了 很 多 奖励 方法 ,但 还 是 很 少 人 愿意 去 
做 系统 测试 。 而 张 建 阳 却 从 那 时 查阅 翻译 了 很 多 国内 外 的 资料 ,对 软件 测试 产生 了 浓厚 
的 兴趣 。 

像 张 建 阳 这 样 在 工作 中 将 自己 定位 在 软件 测试 领域 的 开发 人 员 并 不 多 见 , 因 为 程序 
员 更 愿意 去 做 开发 而 不 是 测试 ,从 大 环境 上 ,测试 人 员 收 入 水 平 低 也 是 原因 之 一 。 而 在 微 
软 ,测试 人 员 和 开发 人 员 的 工资 水 平 是 相同 的 。 

如 何 改 变 这 种 现状 呢 ? 有 人 说 可 以 派 人 去 国外 先进 的 软件 企业 学 习 , 但 这 种 方式 因 
为 牵涉 到 商业 秘密 ,可 操作 性 不 大 。 陈 宏 刚 博士 认为 更 好 的 方法 是 引进 人 才 , 把 在 国外 大 
型 软件 公司 工作 过 、 有 经 验 的 人 才 引 进来 ,甚至 要 高 薪 聘 请 。 他 表示 ,这 不 仅仅 是 一 个 人 
的 问题 ,关键 是 能 够 把 整个 软件 测试 的 水 准 提高 一 个 层次 。 
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引进 人 才 只 是 开始 ,更 重要 的 是 培养 一 批 软 件 测试 人 才 。 软 件 开发 的 教育 培训 都 是 
比较 正规 的 ,各 个 学 校 也 都 设 有 专业 ,但 软件 测试 还 没有 正规 的 专业 毕业 生 , 而 且 没 有 评 
判 的 标准 。 陈 宏 刚 博士 给 很 多 软件 学 院 建议 ,开设 四 方面 的 软件 测试 专业 基础 课 : 软件 
测试 基础 .软件 测试 开发 .高 级 软件 测试 案例 和 行业 软件 特色 测试 方法 。 国 内 现在 已 经 有 
了 一 些 软 件 测试 基础 的 教材 ,但 其 他 的 教材 还 没有 。 高 级 软件 测试 案例 主要 是 大 型 软件 
测试 案例 ,大 型 软件 出 现 的 问题 具有 很 强 的 代表 性 。 而 行业 特色 软件 测试 的 课程 可 以 
开阔 学 生 的 视野 。 陈 博士 介绍 说 ,在 国外 ,也 是 极 少 的 高 等 院 校 开 设 测 试 专业 ,但 可 以 
借鉴 民间 的 培训 机 构 课 程 。 在 有 一 批 专业 的 测试 人 才 出 现 之 后 ,人 们 会 认识 到 他 们 的 
重要 性 。 

如 果 你 已 经 开始 从 事 软 件 测 试 工作 , 千 万 不 要 认为 软件 测试 没有 什么 发 展 的 潜力 和 
前 途 。 刘 忠 从 1995 年 接 下 IBM 的 OS2 汉化 版 本 的 测试 开始 到 现在 ,一 直 工作 在 软件 测 
试 领 域 , 并 升 到 了 公司 高 级 副 总 裁 的 位 置 。 和 腾 软 件 也 培养 了 一 批 测试 工程 师 , 他 们 从 对 
测试 职业 将 信 将 疑 到 明确 自己 的 测试 方面 的 职业 目标 。 刘 忠 介 绍 说 :“ 很 多 人 开始 做 测 
试 执行 工作 时 会 说 很 麻烦 、 很 枯燥 ,只 是 一 味 地 埋怨 ,而 不 是 主动 地 去 学 习 , 他 们 没有 看 到 
软件 测试 背后 所 隐藏 的 知识 。 因 为 学 习 可 以 做 这 些 工作 ,不 学 习 也 可 以 做 这 些 工作 ,但 质 
量 是 不 同 的 。 有 些 人 自学 和 请 教 了 很 多 测试 技术 和 管理 方面 的 知识 ,公司 自然 就 会 在 下 
个 项 目 中 去 培养 他 们 。” 

因此 ,对 于 一 个 新 手 , 要 在 各 方面 培养 自己 的 能 力 。 首 先是 要 理解 各 种 测试 流程 ,并 
在 理解 的 基础 上 转化 为 自己 的 知识 ,以 后 遇 到 相似 的 问题 能 自己 去 解决 。 在 测试 技能 上 ， 
要 知道 测试 有 哪些 手段 ,比如 压力 测试 有 哪些 方法 ,哪些 工具 可 以 辅助 做 测试 。 从 专业 技 
能 上 ,面向 不 同 的 技术 方向 , 像 操 作 系 统 、 网 络 、 通 信 等 都 要 从 专业 上 深入 了 解 。 这 三 方面 
要 同步 去 成 长 。 


软件 测试 工程 师 未 来 的 发 展 


从 事 软 件 测试 有 没有 前 途 , 未 来 的 职业 发 展 方向 怎样 呢 ? 

陈 宏 刚 博士 表示 ,软件 测试 工程 师 在 微软 的 发 展 有 几 种 途径 。 一 种 走 技术 路 线 , 成 为 
高 级 软件 测试 工程 师 , 这 时 能 够 独立 测试 很 多 软件 ,再 向 上 可 以 成 为 软件 测试 架构 设计 
师 。 第 二 种 就 是 向 管理 方向 发 展 ,从 测试 工程 师 到 组 长 (Leader), 再 到 项 目 经 理 
(Manager) ,到 更 高 的 职位 。 第 三 种 可 以 换 职 业 , 做 项 目 管 理 , 做 开发 人 员 都 可 以 ,很 多 测 
试 工具 软件 开发 工程 师 在 写 测试 软件 的 过 程 中 ,因为 开发 方面 积累 了 经 验 , 同 时 对 软件 产 
品 本 身 产 生 了 自己 的 看 法 ,所 以 很 容易 转 去 做 产品 编程 。 

陈 宏 刚 博士 现在 还 带 着 一 个 测试 小 组 ,两 个 清华 软件 学 院 的 学 生 , 一 个 南开 的 专门 做 
软件 测试 的 博士 生 , 一 个 北邮 的 学 生 , 他 们 负责 总 部 一 个 产品 的 测试 。 陈 博士 表示 ,在 自 
己 简单 地 讲 讲 思路 ,共同 探讨 之 后 ,他 们 一 星期 就 找 出 了 70 多 个 Bug, 也 感觉 学 了 很 多 知 
识 , 并 表示 以 后 专注 于 软件 测试 专业 ,因为 他 们 感觉 软件 测试 真 的 是 一 门 很 深 的 学 科 , 有 
很 多 可 以 研究 的 课题 。 其 实 微软 的 测试 人 员 很 多 也 都 是 硕士 .博士 ,他 们 同样 在 做 创造 性 
的 工作 ,保证 着 程序 质量 ,推动 着 软件 的 进步 。 


25 


《软件 测试 技术 与 实践 》 


软件 测试 是 正在 快速 发 展 、 充 满 挑 战 的 领域 。 尽 管 现在 单机 版 桌面 软件 的 测试 已 经 
成 熟 了 很 多 ,但 对 于 网 络 时 代 的 来 临 ,包括 微软 在 内 的 公司 对 基于 网 络 的 测试 也 没有 一 套 
完整 的 体系 ,也 是 处 于 探索 中 ,网 络 被 攻击 的 可 能 性 太 大 ,这 就 是 为 什么 黑客 在 网 络 上 能 
兴风作浪 的 原因 。 网 络 测试 是 一 个 新 环境 ,而 且 面 临 很 大 的 挑战 。 

软件 测试 未 来 的 发 展 空间 很 大 ,软件 测试 工程 师 的 职业 之 路 同样 充满 希望 。 

资料 来 源 : 软件 测试 网 (http://www. 51testing. com/) ,有 删改 。 


第 2 章 软件 质量 与 质量 保证 


随 着 软件 应 用 逐渐 融和 人 社会 日 常生 活 的 各 个 方面 ,人 们 越 来 越 关注 软件 的 质量 ,但 
是 , 却 很 难 对 软件 质量 给 出 一 个 全 面 的 描述 。 于 是 ,多 年 来 提出 的 各 种 各 样 的 软件 质量 度 
量 和 因素 ,都 试图 定义 一 组 属性 ,以 推动 实现 较 高 的 软件 质量 ,这 些 质量 因素 特性 包括 可 
靠 性 、 易 用 性 ,维护 性 、 功 能 性 和 可 移植 性 等 。 

从 本 质 上 说 ,每 个 人 都 希望 建立 高 质量 的 系统 ,但 生产 “完美 "软件 所 需 的 时 间 和 工作 
量 在 市 场 主导 的 世界 里 根本 无 法 达到 。 这 个 问题 就 转化 成 为 ,是 否 应 该 生产 “足够 好 ”的 
软件 呢 ? 虽然 许多 公司 是 这 样 做 的 ,但 这 样 也 会 有 很 大 的 负面 影响 。 

此 外 ,不 管 选择 什么 方法 ,从 预防 .评估 和 失效 等 方面 来 考虑 ,质量 都 是 有 成 本 的 。 预 
防 成 本 包括 所 有 被 设计 成 将 预防 缺陷 放 在 首位 的 软件 工程 活动 ;评估 成 本 是 与 评估 软件 
工作 产品 以 确定 其 质量 的 活动 有 关 的 成 本 ;失效 成 本 包括 失效 的 内 部 代价 和 低劣 质量 造 
成 的 外 部 影响 。 软 件 质 量 是 通过 软件 工程 方法 、 扎 实 的 管理 措施 和 全 面 质量 控制 的 应 用 
达到 的 一 一 所 有 这 些 都 需要 软件 质量 保证 基础 设施 的 支持 。 


2.1 质量 与 软件 质量 


事实 上 ,人 们 可 以 用 不 同 的 方式 来 看 待 质量 。 哈 佛 商 学 院 的 David Garvin 指出 :“ 质 
量 是 一 个 复杂 多 面 的 概念 ”, 可 以 从 5 个 不 同 的 观点 来 描述 : 

。 玄妙 观点 认为 质量 是 马上 就 能 识别 的 东西 , 却 不 能 清楚 地 定义 
用 户 观点 是 从 最 终 用 户 的 具体 目标 来 说 的 ,如 果 产 品 达到 这 些 目标 ,就 显示 出 
质量 ; 
制造 商 观 点 是 从 产品 的 原始 规格 说 明 的 角度 来 定义 质量 ,如 果 产 品 符合 规格 说 
明 , 就 显示 出 质量 ; 
产品 观点 认为 质量 是 产品 的 固有 属性 (比如 ,功能 和 特性 )， 

。 最 后 ,基于 价值 的 观点 根据 客户 愿意 为 产品 支付 多 少 钱 来 评测 质量 。 

实际 上 ,质量 涵盖 所 有 这 些 观 点 ,甚至 更 多 。 

设计 质量 是 指 设计 师 赋 予 产品 的 特性 。 原 料 等 级 、 公 差 和 性 能 等 规格 说 明 决 定 了 设 
计 质 量 。 如 果 产品 是 按照 规格 说 明 书 制造 的 ,那么 使 用 了 较 高 等 级 的 原料 ,规定 了 更 严格 
的 公差 和 更 高 级 别 的 性 能 ,产品 的 设计 质量 就 能 提高 。 在 软件 开发 中 ,设计 质量 包括 设计 
满足 需求 模型 规定 的 功能 和 特性 的 程度 。 符 合 质 量 关 注 的 是 实现 遵从 设计 的 程度 以 及 所 
得 到 的 系统 满足 需求 和 性 能 目标 的 程度 。 但 是 ,设计 质量 和 符合 质量 是 软件 工程 师 必须 
考虑 的 唯一 问题 吗 ? Robert Glass 认为 它们 之 间 比 较 “ 直 观 的 ”关系 符合 下 面 的 公式 : 
用 户 满意 度 一 合格 的 产品 十 好 的 质量 十 按 预 算 和 进度 安排 交付 
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Glass 认为 质量 是 重要 的 。 但 是 ,如 果 用 户 不 满意 ,其 他 任何 事情 就 都 不 重要 了 。 
DeMarco 同意 这 个 观点 ,他 认为 : “产品 的 质量 是 一 个 函数 ,该 函数 确定 了 它 在 多 大 程度 
上 使 这 个 世界 变 得 更 好 。” 这 个 质量 观点 的 意思 就 是 : 如 果 一 个 软件 产品 能 给 最 终 用 户 带 
来 实质 性 的 益处 ,他 们 可 能 会 心甘情愿 地 忍受 偶尔 的 可 靠 性 或 性 能 问题 。 


2.1.1 什么 是 软件 质量 


高 质量 的 软件 是 一 个 重要 目标 ,但 如 何 定义 软件 质量 呢 ? 一 般 地 ,软件 质量 可 以 定义 
为 : 在 一 定 程度 上 应 用 有 效 的 软件 过 程 创 造 有 用 的 产品 ,为 生产 者 和 使 用 者 提供 明显 的 
价值 。 

该 定义 强调 了 以 下 3 个 重要 的 方面 : 

(1) 有 效 的 软件 过 程 为 生产 高 质量 的 软件 产品 页 定 了 基础 。 软 件 工程 实践 允许 开发 
人 员 分 析 问 题 ,设计 可 靠 的 解决 方案 一 一 二 者 皆 为 生产 高 质量 软件 的 关键 所 在 。 最 后 , 诸 
如 变更 管理 和 技术 评审 等 普 适 性 活动 与 其 他 部 分 的 软件 工程 活动 密切 相关 。 

(2) 有 用 的 产品 是 指 满足 最 终 用 户 要 求 的 内 容 、 功 能 和 特征 ,但 最 重要 的 是 ,以 可 靠 、 
无 误 的 方式 交付 这 些 东 西 。 有 用 的 产品 总 是 满足 利益 相关 者 明确 提出 的 那些 需求 ,另外 ， 
也 要 满足 一 些 高 质量 软件 应 有 的 隐 性 需求 (例如 易 用 性) 。 

(3) 通过 为 软件 产品 的 生产 者 和 使 用 者 增值 ,高 质量 软件 为 软件 组 织 和 最 终 用 户 群 
体 带 来 了 收益 。 软 件 组 织 获 益 是 因为 高 质量 的 软件 在 维护 、 改 错 及 客户 支持 方面 的 工作 
基 都 降低 了 ,从 而 使 软件 工程 师 减少 返工 ,将 更 多 的 时 间 花 费 在 开发 新 的 应 用 系统 上 , 软 
件 组 织 因 此 而 获得 增值 。 用 户 群体 也 得 到 增值 ,因为 应 用 系统 提供 有 用 的 能 力 ,在 某 种 程 
度 上 加 快 了 业务 流程 。 最 后 的 结果 是 : 

@ 软件 产品 的 收入 增加 ; 

@ 当 应 用 系统 支持 业务 流程 时 ,收益 更 好 ; 

@ 提高 了 信息 可 获得 性 ,这 对 商业 来 讲 是 至 关 重 要 的 。 


2.1.2 Garvin 的 质量 维度 


David Garvin 建议 采取 多 维 的 观点 考虑 质量 ,包括 从 符合 性 评估 到 抽象 的 (美学 ) 观 
点 。 尽 管 Gravin 的 8 个 质量 维度 不 是 专门 为 软件 制定 的 ,但 考虑 软件 质量 时 依然 可 以 
使 用 : 

性 能 质量 。 软 件 是 否 交付 了 所 有 的 内 容 、 功 能 和 特性 ? 这 些 内 容 、 功 能 和 特性 在 某 种 
程度 上 是 需求 模型 所 规定 的 一 部 分 ,可 以 为 最 终 用 户 提供 价值 。 

特性 质量 。 软 件 是 否 首次 提供 了 使 最 终 用 户 满意 的 特性 ? 

可 靠 性 。 软 件 是 否 无 误 地 提供 了 所 有 的 特性 和 能 力 , 当 需要 (使 用 该 软件 ) 时 , 它 是 否 
是 可 用 的 ,是 否 无 错 地 提供 了 功能 ? 

符合 性 。 软 件 是 否 遵从 本 地 的 和 外 部 的 与 应 用 领域 相关 的 软件 标准 ,是 否 遵循 了 事 
实 存在 的 设计 惯例 和 编码 惯例 ? 例如 ,对 于 菜单 选择 和 数据 输入 等 用 户 界 面 的 设计 是 否 
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符合 已 接受 的 设计 规则 ? 

耐久 性 。 是 否 能 够 对 软件 进行 维护 (变更 ) 或 改正 ( 改 错 ) ,而 不 会 粗心 大 意 地 产生 意 
料 不 到 的 副作用 ? 随 着 时 间 的 推移 ,变更 会 使 错误 率 或 可 靠 性 变 得 更 糟 吗 ? 

适用 性 。 软 件 能 在 可 接受 的 短 时 期 内 完成 维护 (变更 ) 和 改正 ( 改 错 ) 吗 ? 技术 支持 人 
员 能 得 到 所 需 的 所 有 信息 以 进行 变更 和 修正 缺陷 吗 ? 

审美 。 毫 无 疑问 ,关于 什么 是 美的 ,每 个 人 有 着 不 同 的 、 非 常 主观 的 看 法 。 可 是 ,我 们 
中 的 大 多 数 都 同意 美的 东西 具有 某 种 优雅 ,特有 的 流畅 和 醒目 的 外 在 ,这 些 都 是 很 难 量化 
的 ,但 显然 是 不 可 缺少 的 。 

感知 。 在 某 些 情况 下 ,一 些 偏见 将 影响 人 们 对 质量 的 感知 。 例 如 ,有 人 给 你 介绍 了 一 
款 软件 产品 ,该 软件 产品 是 由 过 去 曾经 生产 过 低 质 产品 的 厂家 生产 的 ,你 的 自我 保护 意识 
将 会 增加 ,你 对 于 当前 软件 产品 质量 的 感知 力 可 能 受到 负面 影响 。 类 似 地 ,如 果 厂 家 有 极 
好 的 声誉 ,你 将 能 感觉 到 好 的 质量 ,甚至 在 质量 实际 并 不 存在 的 时 候 。 

Garvin 的 质量 维度 提供 了 对 软件 质量 的 “ 软 ” 评 判 。 这 些 维 度 的 多 数 ( 不 是 所 有 ) 只 
能 主观 地 考虑 。 正 因 如 此 ,也 需要 一 套 “ 硬 ”的 质量 因素 ,这 些 因 素 可 以 宽泛 地 分 成 两 组 : 

@ 可 直接 测量 的 因素 (例如 ,测试 时 发 现 的 缺陷 数 ); 

@ 只 能 间接 测量 的 因素 (例如 ,可 用 性 或 可 维护 性 )。 在 任何 情况 下 ,必须 进行 测量 ， 
应 把 软件 和 一 些 基准 数据 进行 比较 来 确定 质量 。 


2.1.3 McCall 的 质量 因素 


McCall、Richards 和 Walters 提出 了 影响 软件 质量 因素 的 一 种 有 用 的 分 类 。 这 些 软 


件 质量 因素 侧重 于 软件 产品 的 3 个 重要 方面 , 即 操 维护 性 可 移植 性 
作 特性 .承受 变更 的 能 力 以 及 对 新 环境 的 适应 能 力 ， 灵活 性 可 复 用 性 

2 易 测 试 性 互 操作 性 
如 图 2-1 所 示 。 


针对 图 2-1 中 所 提 到 的 因素 , McCall 及 他 的 同 产品 修改 产品 转移 
事 提供 了 如 下 描述 : 

正确 性 。 程 序 满足 其 需求 规格 说 明和 完成 用 户 
任务 目标 的 程度 。 正确 性 

可 靠 性 。 期 望 程序 以 所 要 求 的 精度 完成 其 预期 
功能 的 程度 。 需 要 注意 的 是 ,还 有 更 完整 的 可 靠 性 
定义 。 

效率 。 程 序 完成 其 功能 所 需 的 计算 资源 和 代码 的 数量 。 

完整 性 。 对 未 授权 的 人 员 访问 软件 或 数据 的 可 控 程 度 。 

易 用 性 。 对 程序 进行 学 习 、 操 作 、 准 备 输入 和 解释 输出 所 需要 的 工作 量 。 

维护 性 。 查 出 和 修复 程序 中 的 一 个 错误 所 需要 的 工作 量 。 

灵活 性 。 修 改 一 个 运行 的 程序 所 需 的 工作 量 。 

易 测 试 性 。 测 试 程序 以 确保 它 能 完成 预期 功能 所 需要 的 工作 量 。 

可 移植 性 。 将 程序 从 一 个 硬件 和 (或 ) 软 件 系统 环境 移植 到 另 一 个 环境 所 需要 的 工 


产品 运行 
易 用 性 效率 

可 靠 性 完整 性 

2-1 McCall 的 软件 质量 因素 
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可 复 用 性 。 程 序 ( 或 程序 的 一 部 分 ) 可 以 在 另 一 个 应 用 系统 中 使 用 的 程度 。 这 与 程序 
所 执行 功能 的 包装 和 范围 有 关 。 

互 操作 性 。 将 一 个 系统 连接 到 另 一 系统 所 需要 的 工作 量 。 

要 想 求 得 这 些 质量 因素 的 直接 测度 (这 意味 着 存在 一 个 简单 可 计算 的 值 , 该 值 为 被 考 
察 的 属性 提供 直接 的 指标 。 例 如 程序 的 “规模 "可 以 通过 计算 代码 的 行 数 直接 测量 ) 是 困 
难 的 , 且 在 有 些 情况 下 是 不 可 能 的 。 事实 上 ,由 McCall 等 人 定义 的 度量 仅 能 间接 地 测量 。 
不 过 ,使 用 这 些 因素 评估 应 用 系统 的 质量 可 以 真实 地 反映 软件 的 质量 。 


2.1.4 ISO 9126 质量 因素 


国际 标准 ISO 9126 的 制定 是 试图 标识 计算 机 软件 的 质量 属性 。 这 个 标准 标识 了 6 
个 关键 的 质量 属性 : 

功能 性 。 软 件 满足 已 确定 要 求 的 程度 ,由 以 下 子 属性 表征 : 适合 性 、 准 确 性 、 互 操作 
性 ,依从 性 和 安全 保密 性 。 

可 靠 性 。 软 件 可 用 的 时 间 长 度 ,由 以 下 子 属性 表征 : 成 熟 性 、 容 错 性 和 易 恢 复 性 。 

易 用 性 。 软 件 容易 使 用 的 程度 ,由 以 下 子 属性 表征 : 易 理 解 性 .易学 习性 和 易 操 


作 性 。 

效率 。 软 件 优化 使 用 系统 资源 的 程度 ,由 以 下 子 属性 表征 : 时 间 特 性 和 资源 利用 
特性 。 

维护 性 。 软 件 易于 修复 的 程度 ,由 以 下 子 属 性 表征 : 易 分 析 性 、 易 改变 性 、 稳 定性 和 
易 测 试 性 。 


可 移植 性 。 软 件 可 以 从 一 个 环境 移植 到 另 一 个 环境 的 容易 程度 ,由 以 下 子 属性 表征 : 
适应 性 、 易 安装 性 .符合 性 和 易 蔡 换 性 。 

与 前 面 讨论 的 软件 质量 因素 一 样 ,ISO 9126 中 的 质量 因素 不 一 定 有 助 于 直接 测量 。 
然而 ,它们 确实 为 间接 测量 提供 了 有 价值 的 基础 ,并 为 评估 系统 质量 提供 了 一 个 优秀 的 检 
查 单 。 


2.1.5 定向 质量 因素 


前 面 所 提出 的 质量 维度 和 因素 关注 于 软件 整体 ,可 以 用 其 作为 应 用 系统 质量 的 一 般 
性 指标 。 软 件 团队 可 以 提出 一 套 质 量 特征 和 相关 的 问题 以 调查 满足 每 个 质量 因素 的 程度 
(这 些 特征 和 问题 将 作为 软件 评审 的 一 部 分 来 对 待 )。 例 如 : McCall 把 易 用 性 看 做 重要 
的 质量 因素 , 当 要 求 评审 用 户 界 面 和 评估 易 用 性 时 ,可 能 要 从 McCall 提出 的 子 属性 一 一 
易 理 解 性 、 易 学 习性 和 易 操作 性 开始 。 为 了 进行 评价 ,需要 说 明白 界面 的 具体 的 、 可 测量 
的 (或 至 少 是 可 识别 的 ) 属 性 。 例 如 : 

直觉 。 界 面 遵照 预期 使 用 模式 的 程度 ,使 得 即使 是 新 手 , 不 经 过 专门 培训 也 能 使 

。 界面 布局 易于 理解 吗 ? 


也 


。 界面 操作 容易 找到 和 上 手 吗 ? 

。 界面 使 用 了 可 识别 的 隐喻 吗 ? 

。 输入 安排 得 节约 敲 击 键盘 和 点 击 鼠 标 吗 ? 

。 界面 符合 3 个 重要 原则 吗 ? 

。 美学 的 运用 有 助 于 理解 和 使 用 吗 ? 

效率 。 定 位 或 初步 了 解 操作 和 信息 的 程度 。 

。 界面 的 布局 和 风格 可 以 使 用 户 有 效 地 找到 操作 和 信息 吗 ? 

。 一 连 串 的 操作 (或 数据 输入 ?可 以 用 简单 动作 达到 吗 ? 

。 输出 的 数据 和 显示 的 内 容 是 否 能 立即 被 理解 ? 

。 分 层 操 作 是 否 组 织 得 能 使 用 户 完 成 某 项 工作 所 需 导航 的 深度 最 小 ? 

健壮 性 。 软 件 处 理 有 错 的 输入 数据 或 不 恰当 的 用 户 交互 的 程度 。 

。 如 果 输 入 了 规定 边界 上 的 数据 或 恰好 在 规定 边界 外 的 数据 ,软件 能 识别 出 错误 

吗 ? 更 为 重要 的 是 ,软件 还 能 继续 运行 而 不 出 错 或 性 能 不 下 降 吗 ? 

。 界面 能 识别 出 常见 的 错误 ,并 能 清晰 地 指导 用 户 回 到 正确 的 轨道 上 来 吗 ? 

。 当 发 现 了 与 软件 功能 有 关 的 错误 ,界面 是 否 提供 有 用 的 诊断 和 指导 ? 

丰富 性 。 界 面 提供 丰富 特征 集 的 程度 。 

。 界面 是 否 能 按照 用 户 的 特定 要 求 进行 客户 化 ? 

。 界面 是 否 提供 宏 操作 以 使 用 户 将 单个 的 行为 或 命令 当做 一 连 串 的 常用 操作 ? 

当 界面 设计 展开 后 ,软件 团队 将 评审 设计 原型 ,询问 关注 的 问题 。 如 果 对 这 些 问题 的 
大 多 数 回答 是 “肯定 的 ”, 用 户 界面 就 显示 出 了 高 质量 。 应 该 为 每 个 待 评估 的 质量 因素 开 
发 出 类 似 的 一 组 问题 。 


2.1.6 ”过 渡 到 量化 观点 


前 面 讨论 了 一 组 测量 软件 质量 的 定性 因素 。 软 件 界 也 力图 开发 软件 质量 的 精确 的 测 
度 ,但 有 时 又 会 为 活动 的 主观 性 而 受挫 。Cavano 和 McCall 讨论 了 这 种 情形 : 

质量 的 确定 是 日 常事 件 ( 如 葡萄 酒 品尝 比赛 运动 赛事 (例如 ,体操 )、 智 力 竞赛 等 
中 的 一 个 关键 因素 。 在 这 些 情况 下 ,质量 是 以 最 基本 、 最 直接 的 方式 来 判断 的 : 在 相同 
的 条 件 和 预先 决定 的 概念 下 将 对 象 进行 并 列 对 比 。 葡 菊 酒 的 质量 可 以 根据 清澈 度 、 颜 
色 、 酒 花 和 味道 等 来 判断 。 然 而 ,这 种 类 型 的 判断 是 很 主观 的 ,最 终 的 结果 必须 由 专家 
给 出 。 

主观 性 和 特殊 性 也 适用 于 软件 质量 的 确定 。 为 了 帮助 解决 这 个 问题 ,需要 对 软件 质 
量 有 一 个 更 精确 的 定义 ,同样 ,为 了 客观 分 析 , 需 要 产生 软件 质量 的 定量 测量 方法 。 既 然 
没有 绝对 知识 这 种 事物 ,就 不 要 期 望 精确 测量 软件 质量 ,因为 每 一 种 测量 都 是 部 分 地 不 完 
美的 。Jacob Bronkowski 是 这 样 描述 知识 (认识 ) 的 自 相 矛 盾 现 象 :“ 年 复 一 年 ,我 们 设计 
更 精准 的 仪器 用 以 更 精细 地 观察 自然 界 ,可 是 当 我 们 留心 这 些 观 察 数据 时 , 却 很 不 愉快 地 
发 现 这 些 数据 依然 是 模糊 的 ,我 们 感到 它们 还 和 过 去 一 样 不 确定 。” 
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2.2 软件 质量 困境 


在 网 上 发 布 的 一 篇 访谈 中 ,Berttand Meyer 这 样 论述 所 谓 的 质量 困境 : 

如 果 生 产 了 一 个 存在 严重 质量 问题 的 软件 系统 ,你 将 受到 损失 ,因为 没有 人 想 去 购 
买 。 另 一 方面 ,如 果 你 花费 无 限 的 时 间 、 极 大 的 工作 量 和 高 额 的 资金 来 开发 一 个 绝对 完美 
的 软件 ,那么 完成 该 软件 将 花费 很 长 的 时 间 , 生 产 成 本 是 极其 高 昂 的 ,以 至 于 破产 。 要 么 
错过 了 市 场 机 会 ,要 么 几乎 耗 尽 所 有 的 资源 。 所 以 企业 界 努 力 达到 奇妙 的 中 间 状 态 : 一 
方面 ,产品 要 足够 好 不 会 立即 被 抛弃 (比如 在 评估 期 ); 另 一 方面 ,又 不 是 那么 完美 ,不 需 花 
费 太 长 时 间 和 太 多 成 本 。 

软件 工程 师 应 该 努力 生产 高 质量 的 系统 ,但 Meyer 所 讨论 的 情况 是 现实 的 ,甚至 对 
于 最 好 的 软件 工程 组 织 , 这 种 情况 也 表明 了 一 种 两 难 的 困境 。 


2.2.1 “足够 好 ”的 软件 


坦率 地 说 ,如 果 准 备 接受 Meyer 的 观点 ,那么 生产 “足够 好 ”的 软件 是 可 接受 的 吗 ? 
对 于 这 个 问题 的 答案 只 能 是 “肯定 的 ”, 因 为 大 的 软件 公司 每 天 都 这 么 做 。 这 些 大 公司 生 
产 带 有 已 知 缺 陷 的 软件 ,并 发 布 给 大 量 的 最 终 用 户 。 他 们 认识 到 ,1. 0 版 提供 的 一 些 功能 
和 特性 达 不 到 最 高 质量 ,计划 在 2. 0 版 改进 。 他 们 这 样 做 ,知道 有 些 客户 会 抱怨 ,但 他 们 
认识 到 上 市 时 间 胜 过 更 好 的 质量 ,只 要 交付 的 产品 “足够 好 ”。 

“足够 好 ”的 软件 提供 用 户 期 望 的 高 质量 功能 和 特性 ,但 同时 也 提供 了 其 他 更 多 的 包 
含 已 知 错误 的 难 解 的 或 特殊 的 功能 和 特性 。 软 件 供 应 商 希 望 广大 的 最 终 用 户 忽 视 错误 ， 
因为 他 们 对 其 他 的 应 用 功能 是 如 此 满意 。 

诚然 “足够 好 ?可 能 在 某 些 应 用 领域 和 几 个 主要 的 软件 公司 起 作用 。 毕 竟 , 如 果 一 家 
公司 有 庞大 的 营销 预算 ,并 能 够 说 服 足够 多 的 人 购买 1. 0 版 本 ,那么 该 公司 已 经 成 功 地 锁 
定 了 这 些 用 户 。 可 以 认为 ,公司 将 在 以 后 的 版 本 提高 产品 质量 。 通 过 提供 足够 好 的 1. 0 
版 ,公司 垄断 了 市 场 。 

但 对 于 一 些小 公司 来 说 ,就 要 警惕 这 一 观念 , 当 你 交付 一 个 足够 好 (有 缺陷 ) 的 产品 
时 ,是 冒 着 永久 损害 公司 声誉 的 风险 ,你 可 能 再 也 没有 机 会 提供 2. 0 版 本 了 ,因为 不 良言 
论 可 能 会 导致 销售 暴跌 和 公司 关门 。 

在 某 个 应 用 领域 (如 实时 嵌入 式 软件 ) 或 者 建造 的 是 与 硬件 集成 的 应 用 软件 (如 汽车 
软件 .电信 软件 ) ,如 果 因 为 朴 忽 而 交付 了 带 有 已 知 错误 的 软件 ,有 可 能 使 公司 处 于 代价 昌 
贵 的 诉讼 之 中 。 在 某 些 情 况 下 其 至 可 以 是 刑事 犯罪 一 一 没有 人 想 要 “足够 好 ”的 飞机 航空 
电子 系统 软件 ! 因此 ,如 果 认 为 “足够 好 ?是 一 个 可 以 解决 软件 质量 问题 的 捷径 , 则 要 谨慎 
行事 。 


2.2.2 质量 成 本 


我 们 知道 ,质量 是 重要 的 ,但 是 花费 时 间 和 人 金钱 一 一 花费 太 多 的 时 间 和 金钱 才能 达到 
实际 需要 的 软件 质量 水 平 。 表 面 上 看 ,这 种 说 法 似乎 是 合理 的 。 毫 无 疑问 ,质量 是 有 成 本 
的 ,但 缺乏 质量 也 有 成 本 一 一 不 仅 是 对 必须 忍受 缺陷 软件 的 最 终 用 户 ,而 且 是 对 已 经 开发 
且 必 须 维 护 该 软件 的 软件 组 织 。 真 正 的 问题 是 : 我 们 应 该 担心 哪些 成 本 。 要 回答 这 个 问 
题 ,就 必须 既 了 解 实现 质量 的 成 本 ,又 了 解 低 质量 软件 的 成 本 。 

质量 成 本 包括 追求 质量 过 程 中 或 在 履行 质量 有 关 的 活动 中 引起 的 费用 以 及 质量 不 佳 
引起 的 下 游 费用 等 所 有 费用 。 为 了 解 这 些 费 用 ,一 个 组 织 必须 收集 度量 数据 ,为 目前 的 质 
量 成 本 提供 一 个 基准 ,找到 降低 这 些 成 本 的 机 会 ,并 提供 一 个 规范 化 的 比 对 依据 。 质 量 成 
本 可 分 为 预防 成 本 .评估 成 本 和 失效 成 本 。 

预防 成 本 包括 : 

@ 计划 和 协调 所 有 质量 控制 和 质量 保证 所 需 管 理 活动 的 成 本 ; 

@ 为 开发 完整 的 需求 模型 和 设计 模型 所 增加 的 技术 活动 的 成 本 ; 

@ 测试 计划 的 成 本 ; 

@ 与 这 些 活动 有 关 的 所 有 培训 成 本 。 

评估 成 本 包括 为 深入 了 解 产品 “第 一 次 通过 ”每 个 过 程 的 条 件 而 进行 的 活动 。 评 估 成 
本 的 例子 包括 : 

。 对 软件 工程 工作 产品 进行 技术 审查 的 成 本 。 

。 数据 收集 和 度量 估算 的 成 本 。 

。 测试 和 调试 的 成 本 。 

失效 成 本 是 那些 如 果 在 将 产品 发 给 客户 之 前 或 之 后 没有 错误 就 不 会 存在 的 费用 。 失 
效 成 本 可 分 为 内 部 失效 成 本 和 外 部 失效 成 本 。 内 部 失效 成 本 发 生 在 当 你 在 发 货 之 前 发 现 
错误 时 ,内 部 失效 成 本 包括 : 

。 为 纠正 错误 进行 返工 (修复 ) 所 需 的 成 本 。 

。 返工 时 无 意 中 产生 副作用 ,必须 对 副作用 加 以 缓解 而 发 生 的 成 本 。 

。 组 织 为 评估 失效 的 模型 而 收集 质量 数据 ,由 此 发 生 的 相关 成 本 。 

外 部 失效 成 本 是 在 产品 已 经 发 给 客户 之 后 发 现 了 缺陷 时 的 相关 成 本 。 外 部 成 本 的 例 
子 是 解决 投诉 ,产品 退货 和 更 换 ,帮助 作业 支持 ,与 保修 工作 相关 的 人 力 成 本 。 不 良 的 声 
誉 和 由 此 产生 的 业务 损失 是 另 一 个 外 部 失效 成 本 ,是 很 难 量 化 但 非常 现实 的 。 生 产 了 低 
质量 的 软件 产品 时 ,不 好 的 事情 就 要 发 生 。 

正如 预料 的 那样 , 当 我 们 从 预防 到 检查 内 部 失效 和 外 部 失效 成 本 ,找到 并 修复 错误 或 
缺陷 的 相关 成 本 急剧 增加 。 根 据 Boehm 和 Basili 收集 的 数据 和 Cigital Inc 的 阐述 ， 
图 2-2 说 明了 这 一 现象 。 

有 研究 发 现 : 在 代码 生成 期 纠正 缺陷 的 行业 平均 成 本 是 每 个 错误 大 约 977 美元 ,如 
果 发 现在 系统 测试 期 ,纠正 同样 的 错误 ,行业 平均 成 本 是 每 个 错误 7136 美元 。Cigital Inc 
认为 ,一 个 大 型 应 用 程序 在 编码 期 会 引入 200 个 错误 。 根 据 行业 平均 水 平 的 数据 ,在 编码 
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阶段 发 现 和 纠正 缺陷 的 成 本 是 每 个 缺陷 977 美元 ,因此 ,在 本 阶段 纠正 这 200 个 “关键 ? 缺 
陷 的 总 费用 大 约 是 195 400 美元 (200X977 美元 ) 。 

行业 平均 水 平 数据 显示 ,在 系统 测试 阶段 发 现 和 纠正 缺陷 的 代价 是 每 个 缺陷 7136 
美元 。 在 这 种 情况 下 ,假定 该 系统 测试 阶段 发 现 大 约 50 个 关键 缺陷 (或 者 Cigital 在 编 
码 阶段 只 发 现 了 这 些 缺 陷 的 25%) ,发现 和 解决 这 些 缺 陷 的 代价 将 是 大 约 356 800 美元 
(50X7136 美元 ) 。 这 将 导致 150 处 关键 错误 会 未 被 发 现 和 矫正 。 在 维护 阶段 发 现 和 
解决 这 些 遗 留 的 150 个 缺陷 的 代价 将 是 2 115 300 美元 (150 X14 102 美元 )。 因 此 ,在 
编码 阶段 之 后 发 现 和 解决 这 200 个 缺陷 的 代价 将 是 2 472 100 美元 (2 115 300 美元 十 
356 800 美元 ) 。 


2.2.3 风险 


低 质 量 的 软件 为 开发 商 和 最 终 用 户 都 增加 了 风险 ,但 设计 和 实现 低劣 的 应 用 系统 所 
带 来 的 损失 并 不 总 是 限于 金钱 和 时 间 。 一 个 极端 的 例子 可 能 有 助 于 说 明 这 一 点 。 

2000 年 11 月 份 ,在 巴拿马 的 一 家 医院 里 ,28 位 病人 在 治疗 多 种 癌症 过 程 中 接受 了 过 
量 的 伽 马 射线 照射 。 此 后 数 月 内 ,其 中 5 例 死 于 辐射 病 ,15 人 发 展 成 严重 的 并 发 症 。 是 
什么 造成 了 这 一 悲剧 ? 为 了 计算 每 位 病人 接受 的 辐射 剂量 ,医院 的 技术 人 员 对 一 家 美国 
公司 开发 的 软件 包 进行 了 修改 。 

为 了 提供 额外 的 能 力 ,这 3 个 巴拿马 医疗 物理 学 家 “调整 * 了 软件 ,他 们 被 指控 犯 有 二 
级 谋杀 罪 , 后 来 ,这 家 美国 公司 在 两 个 国家 面临 着 严重 的 诉讼 。Gage 和 McCormick 评 
论 道 : 

这 不 是 一 个 对 医疗 技术 人 员 的 警示 故事 ,即使 他 们 可 以 找到 使 自己 不 进 监狱 的 一 线 
机 会 ,如 果 他 们 误解 或 误 用 了 技术 。 尽 管 有 很 多 例子 说 明 这 一 点 ,这 也 不 是 一 个 关于 人 类 
如 何 被 伤害 的 故事 ,或 者 更 糟 的 是 被 设计 不 良 或 说 明 不 清 的 软件 伤害 。 这 是 对 任何 一 个 
计算 机 程序 创作 者 的 教训 : 软件 质量 问题 很 重要 ,不 管 是 谋 入 在 汽车 引擎 中 的 ,工厂 里 的 
机 械 手 臂 中 的 ,还 是 嵌入 在 医院 的 治疗 设备 中 的 ,这 些 应 用 必须 做 到 万 无 一 失 , 低 劣 部 署 
的 代码 可 以 杀人 。 

质量 低劣 导致 风险 ,其 中 一 些 非常 严重 。 


2.2.4 朴 忽 和 责任 


政府 或 企业 常常 雇用 一 个 较 大 的 软件 开发 商 或 咨询 公司 来 分 析 需 求 ,然后 设计 和 建 
造 一 个 基于 软件 的 “系统 ”, 用 以 支撑 某 个 重大 的 活动 。 系 统 可 能 支持 主要 的 企业 功能 ( 例 
如 ,养老 金管 理 ) ,或 某 项 政府 职能 (例如 ,卫生 保健 管理 或 国土 安全 ) 。 

工作 始 于 双方 良好 的 意愿 ,但 是 到 了 系统 交付 时 ,情况 已 变 得 糟糕 。 系 统 延期 ,未 能 
提供 预期 的 特性 和 功能 , 易 出 错 , 不 能 得 到 客户 的 认可 。 接 下 来 就 要 打 官 司 。 

在 大 多 数 情况 下 ,顾客 称 开发 商 马虎 大 意 (已 带 到 了 软件 实践 中 ) ,因此 拒绝 付款 。 而 
开发 商 则 常常 声称 ,顾客 一 再 改变 其 要 求 , 并 在 其 他 方面 破坏 了 开发 伙伴 关系 。 无 论 是 哪 
一 种 情况 ,交付 系统 的 质量 都 会 有 问题 。 


2.2.5 质量 和 安全 


随 着 基于 Web 的 系统 和 应 用 的 重要 性 的 增加 ,应 用 系统 的 安全 性 已 变 得 日 益 重 要 。 
简 而 言 之 ,没有 表现 出 高 质量 的 软件 比较 容易 被 攻击 。 因 此 , 低 质量 的 软件 会 间接 地 增加 
安全 风险 , 随 之 而 来 的 是 费用 和 问题 。 

在 ComputerWorld 的 一 篇 访谈 中 ,安全 专家 Gary McGraw 这 样 评论 : 

软件 安全 完全 与 质量 有 关系 。 必 须 一 开始 就 在 设计 构造, 测试 .编码 阶段 以 及 在 整 
个 软件 生命 周期 (过 程 ) 中 考虑 安全 性 、 可 靠 性 、 可 得 性 、 可 信 性 。 即 使 是 已 认识 到 软件 安 
全 问题 的 人 们 也 主要 关注 生命 周期 的 晚 些 阶段 。 越 早 发 现 软 件 问题 越 好 。 有 两 种 类 型 的 
软件 问题 ,一 种 是 隐藏 的 错误 ,这 是 实现 的 问题 。 另 一 种 是 软件 缺陷 ,这 是 设计 中 的 构造 
问题 。 人 们 对 错误 关注 太 多 , 却 对 缺陷 关注 不 够 。 

要 构造 安全 的 系统 ,就 必须 注重 质量 ,并 在 设计 时 必须 开始 关注 。 通 过 消除 架构 缺陷 
(从 而 提高 软件 质量 ) ,将 会 使 攻击 软件 更 加 困难 。 


2.2.6 管理 活动 的 影响 


软件 质量 受 管理 决定 的 影响 往往 和 受 技术 决定 的 影响 是 一 样 的 ,即使 最 好 的 软件 工 
程 实践 也 能 被 糟糕 的 商业 决策 和 有 问题 的 项 目 管理 活动 破坏 。 

估算 决策 。 在 确定 交付 日 期 和 制定 总 预算 之 前 ,给 软件 团队 提供 项 目 估算 数据 是 很 
少见 的 。 反 而 是 团队 进行 了 “健康 检查 ”, 以 确保 交付 日 期 和 里 程 碑 是 合理 的 。 在 许多 情 
况 下 ,存在 着 巨大 的 上 市 时 间 压 力 ,这 迫使 软件 团队 接受 不 现实 的 交付 日 期 。 结 果 , 抄 了 
近 路 ,可 以 获得 更 高 质量 软件 的 活动 被 忽略 掉 了 ,产品 质量 受到 损害 。 如 果 交 付 日 期 是 不 
合理 的 ,坚持 立场 就 是 重要 的 。 这 就 是 解释 为 什么 你 需要 更 多 的 时 间 ,或 者 也 可 以 建议 在 
指定 的 时 间 交 付 一 个 (高 质量 的 ) 功 能 子 集 。 

进度 安排 决策 。 当 建立 了 软件 项 目 时 间 表 时 ,按照 依赖 性 安排 任务 的 先后 顺序 。 例 
如 ,由 于 A 构件 依赖 于 B.C 和 D 构 件 中 的 处 理 , 直 到 B.C 和 D 构件 完全 测试 后 ,才能 安 
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排 A 构件 进行 测试 。 项 目 计 划 将 反映 这 一 点 。 但 是 ,如 果 时 间 很 紧 , 为 了 做 进一步 的 关 
键 测试 ,A 必须 是 可 用 的 。 在 这 种 情况 下 ,可 能 会 决定 在 没有 其 附属 构件 (这 些 附 属 构件 
的 运行 要 稍 落后 于 时 间 表 ) 的 情况 下 测试 A, 这 样 对 于 交付 前 必须 完成 的 其 他 测试 ,就 可 
以 使 用 A 了。 毕竟, 期 限 正在 逼近 。 因 此 ,A 可 能 有 隐藏 的 缺陷 ,只 是 晚 些 时 候 被 发 现 ， 
质量 会 受到 影响 。 

面向 风险 的 决策 。 风 险 管理 是 成 功 软件 项 目的 关键 特性 之 一 。 软 件 开发 商 真 的 需要 
知道 哪儿 可 能 会 出 问题 ,并 建立 一 项 如 果 确 实 出 问题 时 的 应 急 计划 。 太 多 的 软件 团队 喜 
欢 盲目 乐观 ,在 什么 都 不 会 出 问题 的 假设 下 建立 开发 计划 。 更 粳 的 是 ,他 们 没有 办 法 处 理 
真 的 出 了 差错 的 事情 。 结 果 , 当 风险 变 成 现实 ,一片 混乱 ,并 且 随 着 疯狂 程度 的 上 升 ,质量 
水 平 必然 下 降 。 

Meskimen 定律 能 最 好 地 概括 软件 质量 面临 的 困境 一 一 从 来 没有 时 间 做 好 ,但 总 是 
有 时 间 再 做 一 遍 。 事 实 上 , 花 点 时 间 把 事情 做 好 ,这 几乎 从 来 都 不 是 错误 的 决定 。 


2.3 WebApp 设计 质量 


早期 的 WWW( 大 约 从 1990 年 到 1995 年 )Web 站 点 仅 包含 链接 在 一 起 的 一 些 超 文 
本 文件 ,这 些 文件 使 用 文本 和 有 限 的 图 形 来 表示 信息 。 随 着 时 间 的 推移 ,一 些 开 发 工具 
(例如 ,XML Java) 扩 展 了 HTML 的 能 力 , 使 得 Web 工程 师 在 向 客户 提供 信息 的 同时 也 
能 提供 计算 能 力 。 基 于 Web 的 系统 和 应 用 (总 称 为 WebApp) 诞 生 了 。 今 天 ,WebApp 已 
经 发 展 成 为 成 熟 的 计算 工具 ,这 些 工具 不 仅 可 以 为 最 终 用 户 提供 独立 的 功能 ,还 可 以 与 公 
司 数据 库 和 业务 应 用 集成 在 一 起 。 

WebApp 是 一 种 独特 的 软件 类 型 ,Powell 提出 了 基于 Web 的 系统 和 应 用 “涉及 印刷 
出 版 和 软件 开发 之 间 市场 和 计算 之 间 内 部 通信 和 外 部 关系 之 间 以 及 艺术 和 技术 间 的 混 
合 "。 绝 大 多 数 WebApp 具备 下 列 属性 : 

网 络 密集 性 : WebApp 驻 留 在 网 络 上 ,服务 于 不 同 客户 群体 的 需求 。 网 络 提供 开放 
的 访问 和 通信 (如 因特网 ) 或 者 受 限 的 访问 和 通信 (如 企业 内 联网 ) 。 

并 发 性 : 大 量 用 户 可 能 同时 访问 WebApp。 很 多 情况 下 最 终 用 户 的 使 用 模式 存在 很 
大 差异 。 

无 法 预知 的 负载 量 : WebApp 的 用 户 数量 每 天 都 可 能 有 数量 级 的 变化 。 周 一 显示 有 
100 个 用 户 使 用 系统 , 周 四 就 可 能 会 有 10 000 个 用 户 。 

性 能 : 如 果 一 位 WebApp 用 户 必须 等 待 很 长 时 间 ( 访 问 、 服 务 器 端 处 理 、 客 户 端 格式 
化 显示 ) ,该 用 户 就 可 能 转向 其 他 地 方 。 

可 用 性 : 尽管 期 望 百分之百 的 可 用 性 是 不 切实 际 的 ,但 是 对 于 热门 的 WebApp, 用 户 
通常 要 求 能 够 全 天 候 访 问 。 澳 大 利 亚 或 亚洲 的 用 户 可 能 在 北美 传统 的 应 用 软件 脱 机 维护 
时 间 要 求 访问 。 

数据 驱动 : 许多 WebApp 的 主要 功能 是 使 用 超 媒体 向 最 终 用 户 提供 文本 、 图 片 .音频 
及 视频 内 容 。 除 此 之 外 ,WebApp 还 常 被 用 做 访问 那些 存储 在 Web 应 用 环境 之 外 的 数据 
库 中 的 信息 (例如 ,电子 商务 或 金融 应 用 ) 。 
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内 容 敏 感性 : 内 容 的 质量 和 艺术 性 仍然 在 很 大 程度 上 决定 了 WebApp 的 质量 。 

持续 演化 : 传统 的 应 用 软件 是 随 一 系列 规划 好 的 时 间 间 隔 发 布 而 演化 的 ,而 Web 应 
用 则 持续 地 演化 。 对 某 些 WebApp 而 言 ( 特 别 是 其 内 容 ) , 按 分 钟 发 布 更 新 ,或 者 对 每 个 
请 求 动态 更 新 页 面 内 容 , 这 些 都 是 司空 见 惯 的 事情 。 

即时 性 : 尽管 即时 性 (也 就 是 将 软件 尽快 推 向 市 场 的 迫切 需要 ) 是 很 多 应 用 领域 的 特 
点 ,然而 将 WebApp 投入 市 场 可 能 只 是 几 天 或 几 周 的 事 。 

安全 性 : 由 于 WebApp 是 通过 网 络 访问 来 使 用 的 ,因此 要 限制 访问 的 最 终 用 户 的 数 
量 , 即 使 可 能 非常 困难 。 为 了 保护 敏感 的 内 容 , 并 提供 保密 的 数据 传输 模式 ,在 支持 
WebApp 的 整个 基础 设施 上 和 应 用 本 身 内 部 都 必须 实施 较 强 的 安全 措施 。 

美观 性 : 不 可 否认 ,WebApp 的 用 户 界 面 外 观 很 有 吸引 力 。 对 于 是 否 能 将 产品 或 是 
思想 成 功 地 推 向 市 场 ,界面 美观 和 技术 设计 同样 重要 。 

其 他 应 用 类 型 可 能 也 具备 上 述 某 些 特性 ,但 WebApp 几乎 具备 了 上 述 的 所 有 属性 。 

每 个 上 网 或 者 用 过 内 部 网 的 人 都 对 什么 是 “好 的 ”WebApp 有 自己 的 看 法 ,大 家 看 待 
这 一 问题 的 角度 也 相差 甚 远 。 有 些 用 户 喜 欢 闪烁 的 图 示 , 有 些 人 则 喜欢 简单 的 文本 ;有 些 
用 户 想 看 到 丰富 的 内 容 , 而 有 些 人 只 是 渴望 看 到 简略 的 陈述 ;有 些 人 喜欢 高 级 的 分 析 工 具 
或 者 数据 库 访 问 ,而 有 些 人 只 是 需要 一 些 简 单 应 用 。 实 际 上 ,用 户 对 于 “好 的 WebApp” 的 
理解 (基于 这 种 理解 而 接受 或 拒绝 WebApp) , 比 起 从 技术 角度 讨论 WebApp 的 质量 ,前 
者 可 能 更 为 重要 。 

实际 上 ,前 面 讨论 的 软件 质量 的 所 有 技术 特征 ,以 及 通用 质量 属性 都 适用 于 
WebApp。 然 而 ,其 中 一 些 最 相关 的 通用 特性 一 一 可 用 性 、 功 能 性 、 可 靠 性 ,效率 及 可 维护 
性 一 一 为 评估 基于 Web 的 系统 的 质量 提供 了 有 用 基础 。 

Olsina 和 他 的 同事 设计 了 一 个 “质量 需求 树 ”, 它 定义 了 一 组 可 产生 高 质量 WebApp 
的 技术 属性 ,包括 可 用 性 、 功 能 性 、 可 靠 性 ,效率 和 可 维护 性 ,如 图 2-3 所 示 。 图 中 提 及 的 
标准 对 于 必须 长 期 从 事 设计 、 构 造 和 维护 WebApp 的 工程 师 是 有 帮助 的 。Offutt 又 对 
图 2-3 描述 的 5 个 质量 属性 进行 了 扩展 。 

安全 性 : WebApp 已 经 和 重要 的 公司 及 政府 数据 库 高 度 集成 。 电 子 商务 应 用 系统 提 
取 人 敏感 的 客户 信息 ,然后 将 这 些 信息 存储 起 来 。 由 于 这 些 及 许多 其 他 原因 , WebApp 的 
安全 性 在 很 多 情况 下 变 得 极为 重要 。 安 全 性 的 关键 度量 标准 是 WebApp 和 服务 器 环境 
拒绝 非 授权 访问 和 (或 ) 阻 挡 恶意 攻击 的 能 力 。 

可 用 性 : 如 果 不 可 用 的 话 , 即 使 是 最 好 的 WebApp 也 不 能 满足 用 户 的 要 求 。 从 技术 
的 角度 说 ,可 用 性 是 对 WebApp 的 可 用 时 间 占 总 时 间 的 百分比 的 一 种 度量 。 一 般 最 终 用 
户 期 望 WebApp 一 天 24 小 时 一周 7 天 .一 年 365 天 都 是 可 用 的 ,对 可 用 性 的 任何 减少 
都 是 不 可 接受 的 。 但 “正常 运行 时 间 ” 并 不 是 可 用 性 的 唯一 指标 。Offutt 认为 : 使 用 仅 限 
于 在 一 种 浏览 器 或 平台 上 可 用 的 特性 ,会 使 WebApp 在 那些 具有 不 同 浏览 器 或 平台 的 配 
置 中 变 得 不 可 用 ,用 户 会 毫 无 例外 地 转向 其 他 地 方 。 

可 伸缩 性 : WebApp 和 其 服务 环境 能 否 伸缩 来 处 理 100 个 、1000 个 、10 000 个 或 
100 000 个 用 户 ? WebApp 和 为 其 提供 接口 的 系统 能 不 能 承受 访问 数量 上 的 巨大 波动 ? 
响应 速度 是 否 会 因此 而 剧 减 (或 者 完全 停止 )? 开发 成 功 的 WebApp 是 远 远 不 够 的 ,开发 
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全 球 站 点 可 用 性 
可 用 性 ot 


界面 和 美学 特性 
特殊 特性 
查找 和 检索 能 力 

功能 性 < hm 
与 应 用 领域 相关 的 特性 
正确 的 链接 处 理 

Web 应 用 质量 可 靠 性 < 

用 户 输入 确认 和 恢复 
相应 时 间 性 能 

效率 < mr 
图 形 生成 速度 
易于 修改 

可 维护 性 < 二 适应 性 
可 扩展 性 

图 2-3 质量 需求 树 


能 够 成 功 调节 负载 (相当 多 的 最 终 用 户 ) 的 WebApp 同样 重要 ,而 且 会 变 得 越 来 越 重 要 。 


投放 市 场 时 间 : 虽然 这 并 不 是 真正 的 技术 方面 的 质量 属性 ,仅仅 是 从 商业 角度 考虑 


的 一 种 质量 度量 ,但 是 ,市 场 上 的 第 一 个 WebApp 往往 能 够 吸引 非常 多 的 最 终 用 户 。 


下 面 的 清单 中 列 出 了 一 组 问题 来 帮助 Web 工程 师 和 最 终 用 户 评估 总 体 的 WebApp 


质量 。 


内 容 .功能 和 (或 ) 导 航 选项 能 和 否 按照 用 户 的 喜好 而 定制 ? 

内 容 和 (或 ) 功 能 能 否 按照 用 户 通信 所 用 的 带宽 进行 定制 ? 

图 形 和 其 他 非 文 本 媒体 能 否 正 确 使 用 ? 是 否 出 于 显示 效率 方面 的 考虑 而 对 图 形 
文件 的 大 小 进行 了 优化 ? 

是 否 用 可 以 理解 的 有 效 显示 的 方式 来 组 织 表格 ,并 按 大 小 进行 排序 ? 

是 否 对 HTML 进行 优化 来 消除 低 效率 ? 

总 体 页 面 设计 是 否 容易 阅读 和 导航 ? 

是 否 所 有 的 指针 都 提供 了 指向 用 户 感 兴趣 信息 的 链接 ? 

是 否 大 部 分 的 链接 在 Web 中 都 具有 持久 性 ? 

WebApp 是 否 提供 了 站 点 管理 工具 ? 包括 使 用 跟踪 、 链 接 测 试 . 本 地 搜索 和 安全 
性 工具 。 


在 WWW 上 查找 信息 的 人 们 可 以 获得 数 以 亿 计 的 网 页 。 即 使 是 很 好 地 命中 目标 的 


Web 查找 也 会 得 到 大 量 内 容 。 要 从 这 么 多 的 信息 源 中 选择 所 需要 的 信息 ,用 户 如 何 评价 
WebApp 所 展示 内 容 的 质量 (例如 ,准确 性 、 精 确 性 完整 性 .适时 性 ) 呢 ? Tillman 提出 了 
评价 内 容 质量 的 一 组 有 用 标准 : 


。 能 和 否 很 容易 地 判断 内 容 的 范围 和 深度 ,确保 满足 用 户 的 要 求 ? 
。 是 否 容易 识别 内 容 作 者 的 背景 和 权威 性 ? 
。 能 否决 定 内 容 的 通用 性 ? 最 后 的 更 新 时 间 及 更 新 内 容 是 什么 ? 


。 内 容 和 位 置 是 否 稳定 ( 即 它 是 否 一 直 保存 在 引用 的 URL 处 )? 

除了 这 些 与 内 容 相 关 的 问题 ,下 面 的 一 些 问题 也 需要 考虑 

。 内 容 是 否 可 信 ? 

。 内 容 是 否 独特 ?也 就 是 说 ,WebApp 能 否 给 使 用 它 的 用 户 带 来 一 些 特别 的 好 处 ? 
。 内 容 对 于 目标 用 户 群 体 是 否 有 价值 ? 

。 内 容 的 组 织 是 否 合理 ? 是 否 有 索引 ? 是 否 容易 选取 ? 

上 述 清单 也 只 是 设计 WebApp 时 应 该 考虑 的 问题 中 的 一 小 部 分 。 


2.4 ”实现 软件 质量 


良好 的 软件 质量 是 良好 的 项 目 管理 和 扎实 的 软件 工程 实践 的 结果 。 帮 助 软件 团队 实 
现 高 质量 软件 的 四 大 管理 和 实践 活动 是 : 软件 工程 方法 、 项 目 管理 技术 、 质 量 控制 活动 以 
及 软件 质量 保证 。 


2.4.1 软件 工程 方法 


建立 高 质量 的 软件 必须 理解 所 要 解决 的 问题 ,还 需要 能 够 创造 一 个 符合 问题 的 设计 ， 
该 设计 同时 还 要 有 一 些 性 质 , 以 创造 具有 前 面 讨论 过 的 质量 维度 和 因素 的 软件 。 

软件 工程 的 一 些 概念 和 方法 ,可 能 导致 对 问题 合理 完整 的 理解 和 综合 性 设计 ,从 而 为 
构造 活动 建立 了 坚实 的 基础 。 如 果 应 用 这 些 概念 并 采取 适当 的 分 析 和 设计 方法 ,那么 创 
造 高 质量 软件 的 可 能 性 将 大 大 提高 。 


2.4.2 项 目 管理 技术 


不 良 管理 决策 对 软件 质量 的 影响 ,其 含义 是 明确 的 。 如 果 : 

@ 项 目 经 理 使 用 估算 以 确认 交付 日 期 是 可 以 达到 的 ; 

@ 进度 依赖 关系 是 清楚 的 ,团队 能 够 抵抗 走 捷径 的 诱惑 ; 

@ 进行 了 风险 规划 ,这 样 出 了 问题 就 不 会 引起 混乱 ,软件 质量 将 受到 积极 的 影响 。 
此 外 ,项 目 计划 应 该 包括 明确 的 质量 管理 和 变更 管理 技术 。 


2.4.3 质量 控制 


质量 控制 包括 一 套 软件 工程 活动 ,以 帮助 确保 每 个 工作 产品 符合 其 质量 目标 。 评 
审 模型 以 确保 它们 是 完整 的 和 一 致 的。 检查 代码 ,以 便 在 测试 开始 前 发 现 和 纠正 错 
误 。 应 用 一 系列 的 测试 步骤 以 发 现 处 理 逻辑 ` 数 据 处 理 以 及 接口 通信 中 的 错误 。 当 这 
些 工 作成 果 中 的 任何 一 个 不 符合 质量 目标 时 ,测量 和 反馈 的 结合 使 用 使 软件 团队 调整 
软件 过 程 。 
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2.5 软件 质量 保证 


质量 保证 建立 基础 设施 ,以 支持 坚实 的 软件 工程 方法 ,合理 的 项 目 管理 和 质量 控制 活 
动 一 一 如 果 你 打算 建立 高 品质 软件 ,所 有 这 些 都 是 关键 活动 。 此 外 ,质量 保证 还 包含 一 组 
审核 和 报告 功能 ,用 以 评估 质量 控制 活动 的 有 效 性 和 完整 性 。 质 量 保证 的 目标 是 为 管理 
人 员 和 技术 人 员 提 供 所 需 的 数据 ,以 了 解 产品 的 质量 状况 ,从 而 理解 和 确信 实现 产品 质量 
的 活动 在 起 作用 。 当 然 , 如 果 质 量 保证 中 提供 的 数据 出 现 了 问题 ,处 理 问题 和 使 用 必要 的 
资源 来 解决 质量 问题 是 管理 人 员 的 职责 。 


2.5.1 软件 质量 保证 (SQA) 的 定义 


软件 质量 保证 是 在 软件 过 程 中 的 每 一 步 都 进行 的 “ 普 适 性 活动 "””SQA 包括 : 对 方 
法 和 工具 有 效应 用 的 规程 ,对 诸如 技术 评审 和 软件 测试 等 质量 控制 活动 的 监督 ,变更 管理 
规程 ,保证 符合 标准 的 规程 ,以 及 测量 和 报告 机 制 。 

为 了 正确 地 进行 软件 质量 保证 ,必须 收集 .评估 和 发 布 有 关 软 件 工 程 过 程 的 数据 。 基 
于 统计 的 SQA 有 助 于 提高 产品 和 软件 过 程 本 身 的 质量 。 软 件 可 靠 性 模型 将 测量 加 以 扩 
展 ,能 够 由 所 收集 的 缺陷 数据 推导 出 相应 的 失效 率 和 进行 可 靠 性 预测 。 

总 之 ,应 该 注意 “软件 质量 保证 就 是 将 质量 保证 的 管理 规则 和 设计 规范 映射 到 适用 的 
软件 工程 管理 和 技术 空间 上 ”。 质 量 保证 的 能 力 是 成 熟 的 工程 学 科 的 尺度 。 当 成 功 实现 
上 述 映射 时 ,其 结果 就 是 成 熟 的 软件 工程 。 

软件 质量 保证 包括 : 

(1) SQA 过 程 ; 

(2) 具体 的 质量 保证 和 质量 控制 任务 (包括 技术 评审 和 多 层次 测试 策略 ) ; 

(3) 有 效 的 软件 工程 实践 (方法 和 工具 ); 

(4) 对 所 有 软件 工作 产品 及 其 变更 的 控制 ; 

(5) 保证 符合 软件 开发 标准 的 规程 ( 当 适 用 时 ); 

(6) 测量 和 报告 机 制 。 

其 中 的 管理 问题 和 特定 的 过 程 活动 ,使 软件 组 织 确保 “在 恰当 的 时 间 以 正确 的 方式 做 
正确 的 事情 ”的 具体 活动 。 


2.5.2 SQA 的 背景 


对 于 任何 为 他 人 生产 产品 的 企业 来 说 ,质量 控制 和 质量 保证 都 是 必 不 可 少 的 活动 。 
在 20 世纪 以 前 ,质量 控制 只 由 生产 产品 的 工匠 承担 。 随 着 时 间 推 移 , 大 量 生产 技术 逐渐 
普及 ,质量 控制 由 生产 者 之 外 的 其 他 人 承担 。 

第 一 个 正式 的 质量 保证 和 质量 控制 方案 于 1916 年 由 贝尔 实验 室 提 出 ,此 后 迅速 风靡 
整个 制造 行业 。 在 20 世纪 40 年 代 , 出 现 了 更 多 正式 的 质量 控制 方法 ,这 些 方法 都 将 测量 


40 


软件 质量 与 质量 保证 


和 持续 的 过 程 改进 作为 质量 管理 的 关键 成 分 。 如 今 , 每 个 公司 都 有 保证 其 产品 质量 的 机 
制 。 事 实 上 ,公司 重视 质量 的 明确 声明 已 经 成 为 过 去 几 十 年 中 市 场 营销 的 策略 。 

软件 开发 质量 保证 的 历史 同步 于 硬件 制造 质量 的 历史 。 在 计算 机 发 展 的 早期 (20 世 
纪 50 年 代 和 60 年 代 ) ,质量 保证 只 由 程序 员 承 担 。 软 件 质量 保证 的 标准 是 20 世纪 70 年 
代 首 先 在 军 方 的 软件 开发 合同 中 出 现 的 ,此 后 迅速 传 到 整个 商业 界 的 软件 开发 中 。 延 伸 
前 述 的 质量 定义 ,软件 质量 保证 就 是 为 了 保证 软件 高 质量 而 必需 的 “有 计划 的 .系统 化 的 
行动 模式 ”。 对 软件 来 说 ,各 个 参与 者 都 对 软件 质量 负 有 责任 一 一 包括 软件 工程 师 、 项 目 
管理 者 、 客 户 、 销 售 人 员 和 SQA 小 组 成 员 。 

SQA 小 组 充当 客户 在 公司 内 部 的 代表 。 也 就 是 说 ,SQA 小 组 成 员 必 须 从 客户 的 角 
度 来 审查 软件 。 软 件 是 否 充分 满足 各 项 质量 因素 ? 软件 开发 是 否 依 照 预 先 制定 的 标准 进 
行 ? 作为 SQA 活动 一 部 分 的 技术 规范 是 否 恰当 地 发 挥 了 作用 ? SQA 小 组 的 工作 将 回答 
上 述 这 些 问 题 以 及 其 他 问题 ,以 确保 软件 质量 得 到 维持 。 


2.5.3 SQA 的 要 素 


SQA 涵盖 了 广泛 的 内 容 和 活动 ,这 些 内 容 和 活动 侧重 于 软件 质量 管理 ,可 以 归纳 
如 下 : 

标准 : IEEE ISO 及 其 他 标准 化 组 织 制 定 了 一 系列 广泛 的 软件 工程 标准 和 相关 文 
件 。 标 准 可 能 是 软件 工程 组 织 自愿 采用 的 ,或 者 是 客户 或 其 他 利益 相关 者 责成 采用 的 。 
软件 质量 保证 的 任务 是 要 确保 遵循 所 采用 的 标准 ,并 保证 所 有 的 工作 产品 符合 标准 。 

评审 和 审核 : 技术 评审 是 由 软件 工程 师 执 行 的 质量 控制 活动 , 目的 是 发 现 错误 。 审 
核 是 一 种 由 SQA 人 员 执行 的 评审 ,意图 是 确保 软件 工程 工作 遵循 质量 准则 。 例 如 ,要 对 
评审 过 程 进行 审核 ,确保 以 最 有 可 能 发 现 错误 的 方式 进行 评审 。 

测试 : 软件 测试 是 一 种 质量 控制 功能 , 它 有 一 个 基本 目标 一 一 发 现 错误 。SQA 的 任 
务 是 要 确保 测试 计划 适当 和 实施 有 效 ,以 便 尽 可 能 地 实现 软件 测试 的 基本 目标 。 

错误 /缺陷 的 收集 和 分 析 : 改进 的 唯一 途径 是 衡量 如 何 做 。 软 件 质 量 保 证 人 员 收 集 
和 分 析 错 误 和 缺陷 数据 ,以 便 更 好 地 了 解 错误 是 如 何 引入 的 ,以 及 什么 样 的 软件 工程 活动 
最 适合 消除 它们 。 

变更 管理 : 变更 是 对 所 有 软件 项 目 最 具 破 坏 性 的 一 个 方面 。 如 果 没 有 适当 的 管理 ， 
变更 可 能 会 导致 混乱 ,而 混乱 几乎 总 是 导致 低 质量 。 软 件 质量 保证 确保 进行 足够 的 变更 
管理 实践 。 

教育 : 每 个 软件 组 织 都 想 改善 其 软件 工程 实践 。 改 善 的 关键 因素 是 对 软件 工程 师 、 
项 目 经 理 和 其 他 利益 相关 者 的 教育 。 软 件 质量 保证 组 织 牵头 软件 过 程 改进 ,并 是 教育 计 
划 的 关键 支持 者 和 发 起 者 。 

供应 商 管理 : 可 以 从 外 部 软件 供应 商 获 得 3 种 类 型 的 软件 : 

J@ 简易 包装 软件 包 ( 例 如 ,微软 Office); 

@ 定制 外 壳 一 一 提供 可 以 根据 购买 者 需要 进行 定制 的 基本 框架 结构 ; 

@ 合同 软件 一 一 按 客户 公司 提供 的 规格 说 明 书 定制 设计 和 构造 。 软 件 质量 保证 组 
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的 任务 是 ,通过 建议 供应 商 应 遵循 的 具体 的 质量 做 法 (在 可 能 的 情况 下 ) ,并 将 质量 要 求 作 
为 与 任何 外 部 供应 商 签订 合同 的 一 部 分 ,确保 高 质量 的 软件 成 果 。 

安全 管理 : 随 着 网 络 犯罪 和 新 的 关于 隐私 的 政府 法 规 的 增加 ,每 个 软件 组 织 应 制定 
政策 ,在 各 个 层面 保护 数据 ,建立 防火 墙 保护 Web 应 用 系统 ,并 确保 软件 在 内 部 没有 被 算 
改 。 软 件 质量 保证 确保 应 用 适当 的 过 程 和 技术 来 实现 软件 安全 。 

安全 : 因为 软件 几乎 总 是 人 设计 系统 (例如 ,汽车 应 用 或 飞机 应 用 ) 的 关键 组 成 部 分 ， 
潜在 缺陷 的 影响 可 能 是 灾难 性 的 。 软 件 质量 保证 可 能 负责 评估 软件 失效 的 影响 ,并 负责 
启动 那些 减少 风险 所 必需 的 步骤 。 

风险 管理 : 尽管 分 析 和 减轻 风险 是 软件 工程 师 考 虑 的 事情 ,但 是 软件 质量 保证 组 应 
确保 风险 管理 活动 适当 进行 , 且 已 经 建立 风险 相关 的 应 急 计划 。 

此 外 ,软件 质量 保证 还 确保 将 质量 作为 主要 关注 对 象 的 软件 支持 活动 (如 维修 ,求助 
热线 ,文件 和 手册 ) 高 质量 地 进行 和 开展 。 


2.5.4 ”SQA 的 任务 


SQA 是 由 与 两 个 不 同人 群 相 联系 的 多 种 任务 组 成 一 一 这 两 个 人 群 分 别 是 做 技术 工 
作 的 软件 工程 师 和 负 有 质量 策划 、 监 督 ,记录 、 分 析 和 报告 责任 的 软件 质量 保证 组 。 软 件 
工程 师 通过 采用 可 靠 的 技术 方法 和 措施 进行 技术 评审 ,并 进行 周密 计划 的 软件 测试 来 获 
得 质量 (和 执行 质量 控制 活动 ) 。 

SQA 组 的 行动 纲领 是 帮助 软件 团队 实现 高 品质 的 目标 产品 。 质 量 保证 活动 , 即 从 事 
质量 保证 策划 监督. 记录、 分 析 和 报告 ,这 些 活 动 由 独立 的 软件 质量 保证 组 执行 (和 
完成 ) 。 

编制 项 目 质 量 保证 计划 。 该 计划 作为 项 目 计划 的 一 部 分 ,并 经 所 有 利益 相关 者 评审 。 
软件 工程 组 和 SQA 组 进行 的 质量 保证 活动 都 受 该 计划 支配 。 该 计划 确定 要 进行 的 评 
估 、 要 进行 的 审核 和 评审 、 适 用 于 项 目的 标准 、 错 误 报告 和 跟踪 的 规程 .SQA 组 产 出 的 工 
作 产 品 以 及 将 提供 给 软件 团队 的 反馈 意见 。 

参与 项 目的 软件 过 程 描述 的 编写 。 软 件 团队 选择 完成 工作 的 过 程 。SQA 组 审查 该 
过 程 描 述 是 否 符合 组 织 方针 、 内 部 软件 标准 、 外 部 要 求 的 标准 (例如 ,ISO 9001) ,以 及 是 否 
和 软件 项 目 计划 的 其 他 部 分 一 致 。 

评审 软件 工程 活动 ,以 验证 是 否 符合 规定 的 软件 过 程 。SQA 组 识别 .记录 和 跟踪 偏 
离 过 程 的 活动 ,并 验证 是 否 已 作出 更 正 。 

审核 指定 的 软件 工作 产品 以 验证 是 否 遵守 作为 软件 过 程 一 部 分 的 那些 规定 。SQA 
组 审查 选 定 的 产品 ,识别 .记录 并 跟踪 偏差 ,验证 已 经 作出 更 正 ,并 定期 向 项 目 经 理 报告 其 
工作 成 果 。 

确保 根据 文档 化 的 规程 记录 和 处 理 软件 工作 和 工作 产品 中 的 偏差 。 在 项 目 计 划 、 过 
程 描述 .适用 的 标准 或 软件 工程 工作 产品 中 可 能 会 遇 到 偏差 。 

记录 各 种 不 符合 项 并 报告 给 高 层 管理 人 员 。 跟 踪 不 符合 项 ,直到 解决 。 

除了 这 些 活动 ,SQA 组 还 协调 变更 的 控制 和 管理 ,并 帮助 收集 和 分 析 软 件 度量 。 
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2.5.5 目标 .属性 和 度量 


执行 上 述 软 件 质 量 保证 活动 ,以 实现 一 套 务实 的 目标 : 

需求 质量 。 需 求 模型 的 正确 性 、 完 整 性 和 一 致 性 将 对 所 有 后 续 工 作 产品 的 质量 有 很 
大 的 影响 。 软 件 质量 保证 必须 确保 软件 团队 严格 评审 需求 模型 ,以 达到 高 水 平 的 质量 。 

设计 质量 。 软 件 团队 应 该 评估 设计 模型 的 每 个 元 素 ,以 确保 设计 模型 显示 出 高 质量 ， 
并 且 设 计 本 身 符合 需求 。SQA 寻找 能 反映 设计 质量 的 属性 。 

代码 质量 。 源 代码 和 相关 的 工作 产品 (例如 ,其 他 说 明 资 料 ) 必 须 符 合 本 地 的 编码 标 
准 ,并 显示 出 易于 维护 的 特点 。SQA 应 该 找 出 那些 能 合理 分 析 代码 质量 的 属性 。 

质量 控制 有 效 性 。 软 件 团 队 应 使 用 有 限 的 资源 ,在 某 种 程度 上 最 有 可 能 得 到 高 品 
质 的 结果 。SQA 分 析 在 评审 和 测试 上 的 资源 分 配 ,评估 是 否 以 最 有 效 的 方式 进行 分 
配 的 。 

对 于 所 讨论 的 每 个 目标 , 表 2-1 标 出 了 现 有 的 质量 属性 。 可 以 使 用 度量 数据 来 标明 
所 示 属 性 的 相对 强度 。 


表 2-1 软件 质量 目标 .属性 和 度量 


目 标 属 性 度 量 
歧义 引起 歧义 地 方 的 修改 数量 (例如 许多 、 大 量 、 与 人 友好 ) 
完备 性 TBA、TBD 的 数量 
可 理解 性 节 / 小 节 的 数量 
易 变性 每 项 需求 变更 的 数量 

需求 质量 变更 所 需要 的 时 间 ( 通 过 活动 ) 
可 追溯 性 不 能 追溯 到 设计 /代码 的 需求 数 
模型 清晰 性 UML 模型 数 
每 个 模型 中 描述 文字 的 页 数 
UML 错误 数 
体系 结构 完整 性 ”| 是 否 存在 现成 的 体系 结构 模型 
构件 完备 性 追溯 到 结构 模型 的 构件 数 
过 程 设 计 的 复杂 性 
人 接口 复杂 性 挑选 一 个 典型 功能 或 内 容 的 平均 数 
布局 合理 性 
模式 使 用 的 模式 数量 
复杂 性 环 路 复杂 性 
可 维护 性 设计 要 素 
可 理解 性 内 部 注释 的 百分比 
全 和 变量 命名 约定 
可 重用 性 可 重用 构件 的 百分比 
文档 可 读 性 指数 
资源 分 配 每 个 活动 花费 的 人 员 时 间 百 分 比 
有 村 区 下 完成 率 实际 完成 时 间 与 预算 完成 时 间 之 比 
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续 表 
目 标 属 性 度 量 
评审 效率 评审 度量 
测试 效率 发 现 的 错误 及 关键 性 问题 数 
人 改正 一 个 错误 所 需 的 工作 量 
错误 的 根源 


2.5.6 SQA 计划 


SQA 计划 为 软件 质量 保证 提供 了 一 张 路 线 图 。 该 计划 由 SQA 小 组 (或 者 软件 团队 ) 
制定 ,作为 各 个 软件 项 目 中 SQA 活动 的 模板 。 

IEEE 公布 了 一 个 SQA 计划 标准 ,该 标准 建议 SQA 计划 应 包括 : 

(1) 计划 的 目的 和 范围 

(2) SQA 覆盖 的 所 有 软件 工程 工作 产品 的 描述 (例如 ,模型 文档、 源 代码 ); 

(3) 应 用 于 软件 过 程 中 的 所 有 适用 的 标准 和 习惯 做 法 ; 

(4) SQA 活动 和 任务 (包括 评审 和 审核 ) 以 及 它们 在 整个 软件 过 程 中 的 位 置 ; 

(5) 支持 SQA 活动 和 任务 的 工具 和 方法 ; 

(6) 软件 配置 管理 的 规程 ; 

(7) 收集 .保护 和 维护 所 有 SQA 相关 记录 的 方法 ; 

(8) 与 产品 质量 相关 的 组 织 角色 和 责任 。 


2.5.7 统计 软件 质量 保证 


统计 质量 保证 反映 了 一 种 在 产业 界 不 断 增长 的 趋势 : 质量 的 量化 。 对 于 软件 而 言 ， 
统计 质量 保证 包含 以 下 步骤 : 

(1) 收集 软件 的 错误 和 缺陷 信息 ,并 进行 分 类 。 

(2) 追溯 每 个 错误 和 缺陷 形成 的 根本 原因 (例如 ,不 符合 规格 说 明 、 设 计 错 误 .违背 标 
准 、 缺 乏 与 客户 的 交流 ) 。 

(3) 使 用 Pareto 原则 (80% 的 缺陷 可 以 追溯 到 所 有 可 能 原因 中 的 20%), 将 这 20% 
(“重要 的 少数 ”) 原 因 分 离 出 来 。 

(4) 一 旦 找 出 这 些 重要 的 少数 原因 ,就 可 以 开始 纠正 引起 错误 和 缺陷 的 问题 。 

“统计 质量 保证 ?这 个 比较 简单 的 概念 代表 的 是 创建 自 适 应 软件 过 程 的 一 个 重要 步 
又 ,在 这 个 过 程 中 要 进行 修改 ,以 改进 那些 引入 错误 的 过 程 元 素 。 

举 一 个 普通 的 例子 来 说 明 统计 方法 在 软件 工程 工作 中 的 应 用 。 假 定 软件 开发 组 织 收 
集 了 为 期 一 年 的 错误 和 缺陷 信息 ,其 中 有 些 错 误 是 在 软件 开发 过 程 中 发 现 的 ,另外 一 些 
(缺陷 ) 则 是 在 软件 交付 给 最 终 用 户 之 后 发 现 的 。 尽 管 发 现 了 数 以 百 计 的 不 同 问题 ,所 有 
问题 都 可 以 追溯 到 下 述 原因 中 的 一 个 (或 几 个 ): 

。 不 完整 或 错误 的 规格 说 明 (IES)。 


软件 质量 与 质量 保证 


与 客户 交流 中 所 产生 的 误解 (MCC) 。 
故意 违背 规格 说 明 (IDS) 。 
违反 程序 设计 标准 (VPS) 。 
数据 表示 有 错 (EDR ) 。 
构件 接口 不 一 致 (ICD。 
设计 逻辑 的 错误 (EDL) 。 
不 完整 或 错误 的 测试 (IET) 。 
不 准确 或 不 完整 的 文档 (IID) 。 
将 设计 转换 为 程序 设计 语言 实现 时 的 错误 (PLT) 。 
不 清晰 或 不 一 致 的 人 机 界面 (HCD) 。 
其 他 (MIS) 。 

为 了 使 用 统计 质量 保证 方法 ,需要 建 一 张 如 表 2-2 所 示 的 表格 。 表 中 显示 IES、MCC 
和 EDR 是 造成 所 有 错误 的 53% 的 “重要 的 少数 ”原因 。 但 是 需要 注意 ,在 只 考虑 严重 错 
误 时 ,应 该 将 IES、.EDR、PLT 和 EDL 作为 “重要 的 少数 ”原因 。 一 旦 确定 了 这 些 重要 的 少 
数 原因 ,软件 开发 组 织 就 可 以 开始 采取 改正 行动 了 。 例如 ,为 了 改正 MCC 错误 ,软件 开 
发 者 可 能 要 采用 需求 收集 技术 ,以 提高 与 客户 交流 和 规格 说 明 的 质量 。 为 了 改正 EDR 错 
误 ,开发 者 可 能 要 使 用 工具 进行 数据 建 模 ,并 进行 更 为 严格 的 数据 设计 评审 。 


表 2-2 统计 SQA 数据 收集 


. 


有 总 计 严重 中 等 微小 
数量 | 百分比 % | 数量 | 百分比 % | 数量 | 百分比 % | 数量 | 百分比 % 
IES 20.5 22 34 27 68 18 103 24 
MCC 156 17 12 9 68 18 76 17 
IDS 48 5 1 1 24 6 ~ 
VPS 25 和 0 0 15 4 10 2 
EDR 130 14 26 20 68 18 36 8 
ICI 58 6 9 省 18 5 31 7 
EDL 45 5 14 11 12 3 19 4 
IET 95 10 12 9 35 9 48 11 
IID 36 4 2 2 20 5 14 3 
PLT 60 6 15 12 19 5 26 6 
HCI 28 3 3 Ei 17 4 8 2 
MIS 56 6 0 0 15 4 41 9 
总 计 942 100 128 100 379 100 435 100 


值得 注意 的 是 ,改正 行动 主要 是 针对 “重要 的 少数 "。 随 着 这 些 “ 重 要 的 少数 ”的 改正 ， 
新 的 “重要 的 少数 ”原因 将 提 到 改正 日 程 上 来 。 

已 经 证 明 统计 软件 质量 保证 技术 确实 使 质量 得 到 了 提高 。 在 某 些 情况 下 ,应 用 这 些 
技术 后 ,软件 组 织 已 经 取得 每 年 缺陷 减少 50% 的 好 成 绩 。 

统计 SQA 及 Pareto 原则 的 应 用 可 以 用 一 句 话 概括 : 将 时 间 用 于 真正 重要 的 地 方 ， 
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但 首先 必须 知道 什么 是 真正 重要 的 ! 
2.5.8 软件 工程 中 的 六 西格玛 


六 西格玛 是 目前 产业 界 应 用 最 广泛 的 基于 统计 的 质量 保证 策略 。20 世纪 80 年 代 在 
摩托 罗拉 公司 最 先 普及 ,六 西格玛 策略 “是 严格 且 规 范 的 方法 学 , 它 运 用 数据 和 统计 分 析 ， 
通过 识别 和 消除 制造 以 及 服务 相关 过 程 中 的 “缺陷 ’ 来 测量 和 改进 企业 的 运转 状况 ”。“ 六 
西格玛 ”一 词 来 源 于 6 个 标准 偏差 一 一 每 百 万 个 操作 发 生 3. 4 个 偏差 (缺陷 ), 它 意味 着 非 
常 高 的 质量 标准 。 六 西格玛 方法 有 3 个 主要 的 核心 步骤 。 

。 定义 : 通过 与 客户 交流 的 方法 来 定义 客户 需求 .可 交付 的 产品 及 项 目 目标 。 

。 测量 ;测量 现 有 的 过 程 及 其 产品 ,以 确定 当前 的 质量 状况 (收集 缺陷 度量 信息 ) 。 

。 分 析 : 分 析 缺 陷 度量 信息 ,并 挑选 出 重要 的 少数 原因 。 

如 果 某 个 现 有 软件 过 程 是 适当 的 ,只 是 需要 改进 ,六 西格玛 还 需要 另外 2 个 核心 
步骤 ， 

。 改进 : 通过 消除 缺陷 根本 原因 的 方式 来 改进 过 程 。 

。 控制: 控制 过 程 以 保证 以 后 的 工作 不 会 再 引入 缺陷 原因 。 

以 上 3 个 核心 步骤 和 另外 2 个 附加 步骤 有 时 叫做 DMAIC( 定 义 、 测 量 、 分 析 \ 改 进 和 
控制 ) 方 法 。 

如 果 某 组 织 正在 开发 软件 过 程 (而 不 是 改进 现 有 的 过 程 ), 则 需要 增加 下 面 2 个 核心 
步骤， 

。 设计: 设计 过 程 ,以 达到 避免 缺陷 产生 的 根本 原因 以 及 满足 客户 需求 两 个 目标 。 

。 验 证 : 验证 过 程 模型 是 否 确实 能 够 避免 缺陷 ,并 且 满 足 客户 需求 。 

上 述 步 又 有 时 称 为 DMADV( 定 义 、 测 量 、 分 析 、 设 计 和 验证 ) 方 法 。 


2.6 软件 可 靠 性 


毫 无 疑问 ,计算 机 程序 的 可 靠 性 是 其 整个 质量 的 重要 组 成 部 分 。 如 果 某 个 程序 经 常 
反复 不 能 执行 ,那么 其 他 软件 质量 因素 是 不 是 可 接受 的 就 无 所 谓 了 。 

与 其 他 质量 因素 不 同 , 软 件 可 靠 性 可 以 通过 历史 数据 和 开发 数据 直接 测量 和 估算 出 
来 。 按 统计 术语 所 定义 的 软件 可 靠 性 是 :“ 在 特定 环境 和 特定 时 间 内 ,计算 机 程序 正常 运 
行 的 概率 "。 举 个 例子 来 说 ,如 果 程 序 X 在 8 小 时 处 理 时 间 内 的 可 靠 性 估计 为 0. 999 ,也 
就 意味 着 ,如果 程序 X 执行 1000 次 ,每 次 运行 8 小 时 处 理 时 间 ( 执 行 时 间 ), 则 1000 次 中 
正确 运行 (无 失效 ) 的 次 数 可 能 是 999 次 。 

无 论 何 时 谈 到 软件 可 靠 性 ,都 会 涉及 一 个 关键 问题 , 即 术语 “失效 "(failure)。 在 有 关 
软件 质量 和 软件 可 靠 性 的 任何 讨论 中 ,失效 意味 着 与 软件 需求 的 不 符 。 但 是 这 一 定义 是 
有 等 级 之 分 的 。 失 效 可 能 仅仅 是 令 人 厌烦 的 ,也 可 能 是 灾难 性 的 。 有 的 失效 可 以 在 几 秒 
钟 之 内 得 到 纠正 ,有 的 则 需要 几 个 星期 甚至 几 个 月 的 时 间 才 能 纠正 。 让 问题 更 加 复杂 的 
是 ,纠正 一 个 失效 事实 上 可 能 会 引入 其 他 错误 ,而 这 些 错 误 最 终 又 会 导致 其 他 失效 。 
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2.6.1 可 靠 性 和 可 用 性 的 测量 


早期 的 软件 可 靠 性 测量 工作 试图 将 硬件 可 靠 性 理论 中 的 数学 公式 外 推 来 进行 软件 可 
靠 性 的 预测 。 大 多 数 与 硬件 相关 的 可 靠 性 模型 依据 的 是 由 于 “磨损 ”而 导致 的 失效 ,而 不 
是 由 于 设计 缺陷 而 导致 的 失效 。 在 硬件 中 ,由 于 物理 磨损 (如 温度 .腐蚀 、 震 动 的 影响 ) 导 
致 的 失效 远 比 与 设计 缺陷 有 关 的 失效 多 ,而 软件 恰好 相反 。 实 际 上 ,所 有 软件 失效 都 可 以 
追溯 到 设计 或 实现 问题 上 ,磨损 在 这 里 根本 没有 影响 。 

硬件 可 靠 性 理论 中 的 核心 概念 以 及 这 些 核心 概念 是 否 适用 于 软件 ,对 这 个 问题 的 争 
论 仍然 存在 。 尽 管 在 两 种 系统 之 间 尚 未 建立 不 可 辩驳 的 联系 ,但 是 考虑 少数 几 个 同时 适 
用 于 这 两 种 系统 的 简单 概念 却 很 有 必要 。 

当 我 们 考虑 基于 计算 机 的 系统 时 ,可 靠 性 的 简单 测量 是 “平均 失效 间隔 时 间 ”(Mean 
Time Between Failure, MTBF): 

MTBF=MTTF+MTTR 

其 中 ,MTTF(Mean Time To Failure) 和 MTTR(Mean Time To Repair) 分 别 是 “ 平 
均 失效 时 间 ” 和 "平均 维修 时 间 ”( 尽 管 失 效 可 能 需要 进行 调试 ,进行 相关 的 改正 ,但 在 大 多 
数 情况 下 ,软件 不 做 任何 修改 ,经 过 重新 启动 就 可 以 正常 工作 )。 

许多 研究 人 员 认 为 MTBF 是 一 个 远 比 其 他 与 质量 有 关 的 软件 度量 更 有 用 的 测量 指 
标 。 简 而 言 之 ,最 终 用 户 关 心 的 是 失效 ,而 不 是 总 缺陷 数 。 由 于 一 个 程序 中 包含 的 每 个 缺 
陷 所 具有 的 失效 率 不 同 , 总 缺陷 数 难以 表示 系统 的 可 靠 性 。 例 如 ,考虑 一 个 程序 ,已 运行 
3000 处 理 器 小 时 没有 发 生 故 障 。 该 程序 中 的 许多 缺陷 在 被 发 现 之 前 可 能 有 数 万 小 时 都 
不 会 被 发 现 。 隐 藏 如 此 深 的 错误 的 MTBF 可 能 是 30 000 甚至 60 000 处 理 器 小 时 。 其 他 
尚未 发 现 的 缺陷 ,可 能 有 4000 或 5000 小 时 的 失效 率 。 即 使 第 一 类 错误 (那些 具有 长 时 间 
的 MTBF) 都 去 除了 ,对 软件 可 靠 性 的 影响 也 是 微不足道 的 。 

然而 ,MTBF 可 能 会 产生 问题 的 原因 有 两 个 : 

a 它 突出 了 失效 之 间 的 时 间 跨 度 , 但 不 会 为 我 们 提供 一 个 凸显 的 失效 率 ; 

@ MTBF 可 能 被 误解 为 平均 寿命 ,即使 这 不 是 它 的 含义 。 

可 靠 性 另 一 个 可 选 的 衡量 是 失效 率 (Failures In Time,FIT) 一 一 一 个 部 件 每 10 亿 机 
时 发 生 多 少 次 失效 的 统计 测量 。 因 此 ,1FIT 相当 于 每 10 亿 机 时 发 生 一 次 失效 。 

除 可 靠 性 测量 之 外 ,还 应 该 进行 可 用 性 测量 。 软 件 可 用 性 是 指 在 某 个 给 定时 间 点 上 
程序 能 够 按照 需求 执行 的 概率 。 其 定义 为 : 

可 用 性 =MTTF /(MTTF+MTTR) X100% 

MTBF 可 靠 性 测量 对 MTTF 和 MTTR 同样 敏感 。 而 可 用 性 测量 在 某 种 程度 上 对 

MTTR 较为 敏感 ,MTTR 是 对 软件 可 维护 性 的 间接 测量 。 


2.6.2 软件 安全 


软件 安全 是 一 种 软件 质量 保证 活动 , 它 主要 用 来 识别 和 评估 可 能 对 软件 产生 负面 影 


47 


《软件 测试 技术 与 实 距 》 


响 并 促使 整个 系统 失效 的 潜在 灾难 。 如 果 能 够 在 软件 过 程 的 早期 阶段 识别 出 这 些 灾难 ， 
就 可 以 指定 软件 设计 特性 来 消除 或 控制 这 些 潜在 的 灾难 。 

建 模 和 分 析 过 程 可 以 视 为 软件 安全 的 一 部 分 。 开 始 时 ,根据 危险 程度 和 风险 高 低 对 
灾难 进行 识别 和 分 类 。 例 如 ,与 汽车 上 的 计算 机 巡航 控制 系统 相关 的 灾难 可 能 有 : 

(1) 产生 失去 控制 的 加 速 ,不 能 停止 。 

(2) 踩 下 刹车 踏板 后 没有 反应 (关闭 ) 。 

(3) 开关 打开 后 不 能 启动 。 

(4) 减速 或 加 速 缓慢 。 

一 旦 识别 出 这 些 系统 级 的 灾难 ,就 可 以 运用 分 析 技 术 来 确定 这 些 灾难 发 生 的 严重 性 
和 概率 。 为 了 达到 高 效 , 应 该 将 软件 置 于 整个 系统 中 进行 分 析 。 例 如 ,一 个 微小 的 用 户 输 
人 错误 (人 也 是 系统 组 成 部 分 ) 有 可 能 会 被 软件 错误 放大 ,产生 将 机 械 设 备 置 于 不 正确 位 
置 的 控制 数据 ,此 时 当 且 仅 当 外 部 环境 条 件 满足 时 ,机 械 设 备 的 不 正确 位 置 将 引发 灾难 性 
的 失效 。 失 效 树 分 析 、 实 对 逻辑 及 Petri 网 模型 等 分 析 技 术 可 以 用 于 预测 可 能 引起 灾难 
的 事件 链 , 以 及 事件 链 中 的 各 个 事件 出 现 的 概率 。 

一 旦 完成 了 灾难 识别 和 分 析 ,就 可 以 进行 软件 中 与 安全 相关 的 需求 规格 说 明了 。 规 
格 说 明 包括 一 张 不 希望 发 生 的 事件 清单 ,以 及 针对 这 些 事件 所 希望 产生 的 系统 响应 。 这 
样 就 指明 了 软件 在 管理 不 希望 发 生 的 事件 方面 应 起 的 作用 。 

尽管 软件 可 靠 性 和 软件 安全 彼此 紧密 相关 ,但 是 弄 清 它们 之 间 的 微妙 差异 非常 重要 。 
软件 可 靠 性 使 用 统计 分 析 的 方法 来 确定 软件 失效 发 生 的 可 能 性 ,而 失效 的 发 生 未 必 导 致 
灾难 。 软 件 安全 则 考察 失效 导致 灾难 发 生 的 条 件 。 也 就 是 说 ,不 能 在 真空 中 考虑 失效 ,而 
是 要 在 整个 计算 机 系统 及 其 所 处 环境 的 范围 内 加 以 考虑 。 


2.7 ISO 9000 质量 标准 


质量 保证 体系 可 以 定义 为 : 用 于 实现 质量 管理 的 组 织 结构 责任、 规程 .过 程 和 资 
源 。 创 建 质量 保证 体系 的 目的 是 帮助 组 织 以 符合 规格 说 明 的 方式 ,保证 组 织 的 产品 和 
服务 满足 客户 的 期 望 。 这 些 体 系 槛 盖 了 产品 整个 生命 周期 的 多 种 活动 ,包括 计划 、 控 
制 . 测 量 ` 测试 和 报告 ,并 在 产品 的 开发 和 制造 过 程 中 改进 质量 等 级 。ISO 9000 标准 以 
通用 的 术语 描述 了 质量 保证 体系 要 素 .能够 适用 于 任何 行业 一 一 不 论 提供 的 是 何 种 产 
品 或 服务 。 

某 个 公司 要 登记 成 为 ISO 9000 质量 保证 体系 中 的 一 种 模式 ,该 公司 的 质量 体系 和 实 
施 情况 应 该 由 第 三 方 的 审核 人 员 仔 细 检 查 , 查 看 其 是 否 符合 标准 以 及 实施 是 否 有 效 。 成 
功 注册 之 后 ,这 个 公司 将 获得 由 审核 人 员 所 代表 的 注册 登记 实体 颁发 的 证 书 。 此 后 每 半 
年 进行 一 次 监督 审核 ,以 此 保证 该 公司 的 质量 体系 持续 符合 标准 。 

ISO 9001 一 2000( 见 表 2-3) 中 描述 的 质量 要 求 涉及 质量 管理 体系 、 管 理 者 职责 、 资 源 
管理 ,产品 实现 ,测量 、 分 析 和 改进 等 主题 。 该 国际 标准 已 转换 为 我 国 国家 标准 ,标准 号 为 
GB/T 19001 一 2000。 
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表 2-3 ISO 9001 一 2000 标准 


下 面 的 大 纲 定义 了 ISO 9001 一 2000 标准 的 基本 要 素 。 标 准 的 有 关 详 细 信 息 可 从 国际 标准 化 组 织 
(www. iso. com) 及 其 他 因特网 信息 源 ( 如 www. praxiom. com) 找 到 


建立 质量 管理 体系 的 要 素 为 质量 管理 体系 建立 评审 机 制 
建立 ,实施 和 改进 质量 体系 确定 评审 方法 和 反馈 机 制 
制定 质量 方针 ,强调 质量 体系 的 重要 性 制定 跟踪 程序 
编制 质量 体系 文件 确定 质量 资源 (包括 人 人员、 培训、 基础 设施 要 素 ) 
描述 过 程 建立 控制 机 制 
编制 操作 手册 针对 策划 
制定 控制 (更 新 ) 文 件 的 方法 针对 客户 需求 
制定 记录 保持 的 方法 针对 技术 活动 (如 分 析 、 设 计 、 试 验 ) 
支持 质量 控制 和 质量 保证 针对 项 目 监测 和 管理 
提高 所 有 利益 相关 者 对 质量 重要 性 的 认识 制定 补救 措施 
注重 客户 满意 度 评估 质量 数据 和 度量 
制定 质量 计划 来 描述 目的 、 职 责 和 权力 为 持续 的 过 程 和 质量 改进 制定 措施 
制定 所 有 利益 相关 者 间 的 交流 机 制 


软件 组 织 要 登记 为 ISO 9001 一 2000 认证 ,就 必须 针对 上 述 每 个 方面 的 质量 要 求 (以 
及 其 他 方面 的 质量 要 求 ) 制 定 相关 的 政策 和 规程 ,并 且 有 能 力 证 明 组 织 活动 的 确 是 按照 这 
些 政策 和 规程 实施 的 。 


2.8 习题 


请 参考 课文 内 容 以 及 其 他 资料 ,完成 下 列 选择 题 。 
(1) 在 指定 条 件 下 使 用 时 ,软件 产品 维持 规定 的 性 能 水 平 的 能 力 。 这 是 指 软 件 外 部 
质量 的 ( Xa 
A. 效率 B. 易 用 性 C. 功能 性 D. 可 靠 性 
(2) 以 下 关于 软件 质量 的 说 法 中 ,错误 的 是 ( )。 
A. 软件 产品 必须 提供 用 户 所 需要 的 功能 .并 能 正常 工作 
B. 软件 质量 是 产品 ,组织 和 体系 或 过 程 的 一 组 固有 特性 ,反映 它们 满足 顾客 和 
其 他 相关 方面 要 求 的 程度 
C. 程序 的 正确 性 足以 体现 软件 的 价值 
D. 越 是 关注 客户 的 满意 度 , 软 件 就 越 有 可 能 达到 质量 要 求 
(3) 下 列 有 关 软 件 质量 的 叙述 中 ,错误 的 是 ( ) 
A. 软件 质量 不 仅 包括 软件 产品 的 质量 ,还 包括 软件 过 程 的 质量 
B. 明确 的 软件 质量 属性 是 指 在 合同 或 行业 标准 中 规定 必须 实现 的 质量 要 求 
C. 隐 含 的 软件 质量 属性 在 合同 或 行业 标准 中 没有 规定 ,因此 在 产品 开发 时 不 必 
专门 考虑 
D. 软件 的 功能 和 性 能 必须 结合 在 一 起 考虑 
(4) 软件 开发 过 程 中 必须 伴 有 质量 保证 活动 ,而 软件 测试 又 是 软件 质量 保证 的 关键 
因素 。 下 列 说 法 正确 的 是 ( Ye 
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A. 发 布 出 去 的 软件 有 质量 问题 ,是 软件 测试 人 员 的 错 

B. 软件 测试 技术 要 求 不 高 ,至 少 比 编程 容易 得 多 

C. 软件 测试 是 测试 人 员 的 事 ,与 开发 人 员 无 关 

D. 软件 测试 阶段 发 现 的 错误 并 不 只 是 在 编码 阶段 产生 的 ,需求 和 设计 阶段 也 会 


产生 错误 
2.9 实验 与 思考 
2.9.1 实验 目的 


本 节 “ 实 验 与 思考 ”的 目的 : 

(1) 熟悉 关于 软件 质量 和 质量 保证 的 基本 概念 和 内 容 。 

(2) 通过 对 相关 软件 质量 学 术 观 点 和 相关 质量 标准 的 深入 分 析 , 掌 握 不 断 丰 富 软 件 
质量 最 新 知识 的 学 习 方法 。 

(3) 通过 网 络 资料 的 收集 和 分 析 , 进 一 步 了 解 软件 质量 管理 工具 。 


2.9.2 工具 /准备 工作 


在 开始 本 实验 之 前 ,请 认真 阅读 课程 的 相关 内 容 。 
需要 准备 一 台 带 有 浏览 器 ,能 够 访问 因特网 的 计算 机 。 


2.9.3 实验 内 容 与 步骤 


1) 理解 Garvin 的 质量 维度 。 

参见 本 章 2. 1. 2 节 , Garvin 建议 采取 多 维 的 观点 考虑 质量 。 请 你 积极 思考 ,为 
Garvin 提出 的 每 个 质量 维度 添加 2 个 额外 的 问题 。 这 些 内 容 、 功 能 和 特性 在 某 种 程度 上 
是 需求 模型 所 规定 的 一 部 分 ,可 以 为 最 终 用 户 提供 价值 。 

(1) 性 能 质量 。 软 件 是 否 交付 了 所 有 的 内 容 、 功 能 和 特性 ? 

新 问题 1: 


新 问题 2: 


(2) 特性 质量 。 软 件 是 否 首次 提供 了 使 最 终 用 户 满意 的 特性 ? 
新 问题 1: 


新 问题 2: 


(3) 可 靠 性 。 软 件 是 否 无 误 地 提供 了 所 有 的 特性 和 能 力 , 当 需要 (使 用 该 软件 ) 时 , 它 
是 否 是 可 用 的 ,是 否 无 错 地 提供 了 功能 ? 
新 问题 1: 


新 问题 2: 


(4) 符合 性 。 软 件 是 否 遵从 本 地 的 和 外 部 的 与 应 用 领域 相关 的 软件 标准 ,是 否 遵循 
了 事实 存在 的 设计 惯例 和 编码 惯例 ? 
新 问题 1: 


新 问题 2: 


(5) 耐久 性 。 是 否 能 够 对 软件 进行 维护 (变更 ) 或 改正 ( 改 错 ), 而 不 会 粗心 大 意 地 产 
生意 料 不 到 的 副作用 ? 随 着 时 间 的 推移 ,变更 会 使 错误 率 或 可 靠 性 变 得 更 糟 吗 ? 
新 问题 1: 


新 问题 2: 


(6) 适用 性 。 软 件 能 在 可 接受 的 短 时 期 内 完成 维护 (变更 ) 和 改正 ( 改 错 ) 吗 ? 技术 支 
持 人 员 能 得 到 所 需 的 所 有 信息 以 进行 变更 和 修正 缺陷 吗 ? 
新 问题 1: 


新 问题 2: 


(7) 审美 。 关 于 美的 问题 很 难 量 化 ,但 显然 是 不 可 缺少 的 。 
新 问题 1: 


新 问题 2: 


(8) 感知 。 在 某 些 情况 下 ,一 些 偏 见 将 影响 人 们 对 质量 的 感知 。 
新 问题 1: 


新 问题 2: 


2) 分 析 ISO 9126 质量 因素 中 的 “维护 性 ”属性 。 

ISO 9126 制定 了 试图 标识 计算 机 软件 的 6 个 关键 的 质量 属性 ( 见 2. 1. 4 节 )。 请 分 
析 其 中 “维护 性 ”的 子 属性 : 易 分 析 性 、 易 改变 性 、 稳 定性 和 易 测试 性 ,提出 问题 ,探讨 是 否 
存在 这 些 属性 ,并 简 述 之 。 


51 


《 坎 件 测试 技术 与 实 中 


(1) 易 分 析 性 : 


(2) 易 改 变性 : 


(3) 稳定 性 : 


(4) 易 测 试 性 : 


3)“ 足 够 好 ”的 软件 。 
请 分 析 : 说 出 具体 公司 的 名 字 , 以 及 你 认为 运用 "足够 好 ”思想 开发 的 具体 产品 。 


4) 软件 质量 管理 工具 。 

使 用 SQA 工具 的 目的 是 辅助 项 目 团队 评估 和 改进 软件 工作 产品 的 质量 。SQA 工具 
类 通常 包含 很 多 软件 测试 工具 , 且 工 具 的 机 制 各 异 。 一 般 情 况 下 ,目的 是 评估 特定 工作 产 
品 的 质量 。 

具有 代表 性 的 工具 包括 : 
ARM, 由 NASA 开发 ,提供 了 可 用 于 评估 软件 需求 文档 质量 的 方法 。 
QPR Process Guide and Scorecard, 由 QPR Software 开发 ,提供 对 六 西格玛 及 其 
他 质量 管理 方法 的 支持 。 
Quality Tools and Templates ,由 iSixSigma 开发 ,描述 了 大 量 有 用 的 质量 管理 工 
具 和 方法 。 
NASA Quality Resources ,由 Goddard Space Flight Center 开发 ,提供 了 有 用 的 表 
格 、 模 板 、 检 查 清 单 和 SQA 工具 。 
请 记录 : 通过 网 络 搜索 ,以 进一步 了 解 这 些 工 具 , 并 将 搜索 情况 简单 记录 如 下 : 


软件 质量 与 质量 保证 


2.9.4 实验 总 结 


2.9.5 实验 评价 (教师 ) 


2.10 阅读 与 分 析 : 在 软件 测试 计划 中 确定 测试 需求 


写 测 试 需求 主要 为 了 什么 呢 ? 我 们 的 项 目 中 基本 都 有 很 细致 的 功能 规格 说 明 ,还 有 
其 他 一 些 相关 的 概念 设计 文档 ,我 们 总 是 会 看 到 这 些 文档 的 最 新 版 本 。 然 而 ,我 们 的 项 目 
多 为 迭代 方式 进行 ,分 很 多 版 本 提交 ,1.0.1、1.0.2 等 ,我 们 并 不 是 每 个 版 本 都 要 测试 全 
部 的 功能 ,往往 是 测试 其 中 的 一 部 分 。 有 的 版 本 主要 测 业 务 流程 ,有 的 主要 测 性 能 。 测 试 
需求 就 是 说 明 , 这 个 版 本 需要 测试 哪些 东西 。 

测试 需求 按照 功能 性 、 可 靠 性 、 易 用 性 、 性 能 、 可 维护 性 、 可 移植 性 来 分 类 。 同 时 也 要 
按照 优先 级 来 分 类 ,有 的 是 必须 测试 通过 的 ,有 的 可 以 协商 。 

除了 说 明 我 们 需要 测试 的 内 容 以 外 ,测试 需求 还 有 一 个 重要 的 作用 : 辅助 说 明 测 试 
接受 标准 。 比 如 某 个 版 本 的 功能 测试 需求 有 100 个 功能 点 ,其 中 30 个 必须 实现 ,其 他 70 
个 实现 60 个 即 可 ,假如 每 个 功能 点 1 分 ,那么 ,功能 测试 接受 标准 就 是 : 总 分 90 分 以 上 
并 且 30 个 重要 功能 点 必须 测试 通过 。 假 如 没有 达到 这 个 接受 标准 (只 有 85 分 ), 我 们 就 
可 以 负责 的 说 : 测试 不 通过 ,不 能 发 布 。 如 果 要 发 布 ,可 以 ,变更 项 目 计 划 和 测试 计划 。 

测试 需求 最 好 能 细致 到 功能 点 的 粒度 ,这 样 对 项 目 量化 管理 非常 有 好 处 ,而 且 , 我 认 
为 这 是 应 该 在 项 目 版 本 计划 中 进行 说 明 的 ,如 果 项 目 计 划 中 没有 说 得 很 详细 , 那 我 们 的 测 
试 计划 就 要 写 得 详细 一 些 。 

我 们 来 看 一 个 例子 ,这 是 某 项 目测 试 报告 的 一 部 分 ,其 中 列 出 了 功能 测试 需求 的 执行 
情况 。 


添加 专项 工作 操作 角色 仅 为 系统 管理 员 ,正确 新 建 专项 工作 通过 
编辑 专项 工作 操作 角色 仅 为 系统 管理 员 ,正确 保存 编辑 后 的 专项 工作 通过 
删除 专项 工作 操作 角色 仅 为 系统 管理 员 ,正确 删除 所 选 的 专项 工作 通过 
导出 某 专项 工作 的 警 情 列表 “| 按照 同样 的 数据 字典 格式 导出 保存 为 . xls 文件 通过 
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可 以 看 出 这 里 的 测试 需求 列 得 比较 细 , 而 且 是 以 用 户 的 角度 来 进行 说 明 。 至 于 在 实 
际 项 目 中 ,我 们 需要 写 得 多 细 , 可 以 根据 项 目 情况 来 决定 ,只 是 不 要 忘记 我 们 编制 测试 计 
划 的 主要 目的 。 建 议 尝试 把 测试 需求 写 细 一 些 , 体 会 一 下 量化 管理 的 感觉 。 以 后 我 们 的 
测试 例会 可 以 把 测试 需求 拿 出 来 评审 ,比较 一 下 不 同 项 目的 不 同 策略 。 

资料 来 源 : 2012-2-28 13:10,51Testing 软件 测试 网 采编 ,有 删改 。 


第 3 章 软件 评审 技术 


从 质量 控制 的 角度 出 发 ,技术 评审 是 在 软件 过 程 早期 进行 查 错 的 最 有 效 机 制 。 由 软 
件 工程 师 及 其 同事 一 起 进行 技术 评审 (也 叫 同行 评审 ) ,目的 是 找 出 错误 和 发 现 可 能 对 将 
要 部 署 的 软件 产生 负面 影响 的 问题 。 越 早 发 现 并 纠正 错误 ,错误 传播 到 其 他 软件 工程 产 
品 并 扩大 ,导致 需要 更 多 的 工作 来 纠正 的 可 能 就 越 小 。 软 件 评审 还 能 够 “净化 ”需求 模型 、 
设计 模型 源 代码 和 测试 数据 等 软件 工程 工作 产品 。 

在 软件 工程 过 程 中 进行 的 评审 有 很 多 种 , 且 各 有 各 的 作用 。 在 休息 室 里 讨论 技术 问 
题 的 非 正式 会 谈 是 一 种 评审 方式 ;将 软件 架构 正式 介绍 给 客户 ,管理 层 和 技术 人 员 也 是 一 
种 评审 方式 。 


3.1 软件 评审 的 目的 


前 面 使 用 “错误 "来 描绘 在 软件 发 布 给 最 终 用 户 ( 或 软件 过 程 内 其 他 框架 活动 ) 之 前 ， 
由 软件 工程 师 (或 其 他 人 ) 发 现 的 质量 问题 。 在 软件 过 程 的 环境 中 ,术语 “缺陷 "和 “故障 ” 
是 同义词 ,都 是 指 在 软件 发 布 给 最 终 用 户 ( 或 软件 过 程 内 其 他 框架 活动 ) 后 发 现 的 质量 
问题 。 

软件 质量 控制 的 目标 是 消除 软件 中 存在 的 质量 问题 ,从 广义 上 讲 , 这 也 是 一 般 质 量 管 
理 的 目标 。 不 管 怎么 说 ,发 现 问题 的 时 间 点 是 非常 关键 的 ,明确 指出 “错误 ”和 “缺陷 ”的 差 
别 ,是 因为 它们 对 经 济 、 商 业 \ 心 理 和 人 员 的 影响 有 很 大 区 别 ( 有 时 很 难 明 确 区 分 是 交付 之 
前 还 是 交付 之 后 ,例如 敏捷 开发 中 采用 的 增 量 过 程 )。 作 为 软件 工程 师 , 我 们 期 望 在 客户 
和 (或 ) 最 终 用 户 遇 到 问题 之 前 尽 可 能 多 地 发 现 并 改正 * 错 误 ”, 也 同样 期 望 避免 “缺陷 ”。 
正式 技术 评审 的 主要 目标 是 在 软件 过 程 中 发 现 错误 ,以 使 它们 不 会 在 软件 交付 之 后 
变 成 缺陷 ,其 最 明显 的 优点 就 是 可 以 较 早 发 现 错误 ,以 防止 将 错误 传递 到 软件 过 程 的 后 续 
阶段 。 

产业 界 的 大 量 研究 表明 : 设计 活动 引入 的 错误 占 软件 过 程 中 出 现 的 所 有 错误 (和 最 
终 的 所 有 缺陷 ) 数 量 的 50% 一 65%。 已 经 证 明 , 评 审 技术 在 发 现 设 计 缺 陷 方面 的 有 效 性 
百分比 高 达 75%。 通 过 检测 和 消除 大 量 设 计 错 误 , 评 审 过 程 将 极 大 降低 软件 过 程 后 续 活 
动 的 成 本 。 

可 以 用 “缺陷 放大 模型 "( 见 图 3-1) 来 说 明 在 软件 工程 过 程 的 设计 和 编码 活动 中 错误 
的 产生 和 检测 ,图 中 方 框 表示 软件 工程 活动 。 在 该 活动 中 ,可 能 由 于 政 忽 产 生 错 误 ,评审 
也 可 能 没有 发 现 新 产生 的 错误 以 及 来 自前 面 步骤 的 错误 ,从 而 导致 一 定数 量 的 错误 通过 
了 当前 步骤 。 在 某 些 情况 下 ,从 前 面 步骤 传 过 来 的 错误 在 当前 步骤 中 会 被 放大 (放大 倍数 
为 zx)。 将 开发 步骤 方 框 进一步 细 分 可 以 说 明 这 些 特 点 及 错误 检测 的 有 效 性 百分比 。 错 
误 检 测 的 有 效 性 百分比 是 评审 完善 性 的 函数 。 
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开发 步 双 
缺 了 检测 
通过 的 错误 。 | 
来 自前 面 2 洪 误 检测 加 
乡 台 的 错误 | 以 :x 放大 的 错误 | 效率 ”| 一 作 
新 产生 的 错误 | 百分比 
新 产生 的 错误 


图 3-1 缺陷 方法 模型 


图 3-2 是 一 个 假设 在 软件 过 程 中 不 进行 任何 评审 的 缺陷 放大 的 示例 。 如 图 3-2 所 
示 ,假设 每 个 测试 步骤 都 能 够 发 现 和 改正 50% 的 输入 错误 ,而 且 又 不 引入 任何 新 的 错误 
(乐观 估计 )。10 个 初步 设计 阶段 的 错误 在 测试 开始 之 前 就 能 放大 为 94 个 错误 ,12 个 潜 
伏 的 错误 (缺陷 ) 则 随 软 件 发 布 进入 客户 现场 。 


概要 设 记 
© 详细 设计 
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| 确认 六 恋 至 本 成 测试 
E ， 系统 测试 
0 0 7 
12 
0 L-| 0 50% 
0 


潜伏 的 错误 
(缺陷) 
图 3-2 缺陷 放大 一 无 评审 


图 3-3 的 情况 与 图 3-2 类 似 ,只 是 在 设计 和 编码 开发 步骤 中 引入 了 评审 。 在 这 种 情 
况 下 ,最 初 的 10 个 初步 设计 错误 在 测试 开始 之 前 放大 为 24 个 错误 ,最 后 只 剩 3 个 潜伏 的 
错误 。 回 忆 一 下 与 发 现 和 改正 错误 相关 的 相对 成 本 ,将 图 3-2 和 图 3-3 每 个 步骤 中 发 现 
的 错误 数量 乘 以 消除 一 个 错误 所 需要 的 成 本 (设计 是 1. 5 个 成 本 单位 ,测试 前 是 6. 5 个 成 
本 单位 ,测试 中 是 15 个 成 本 单位 ,发 布 后 是 67 个 成 本 单位 一 一 这 些 乘 数 与 前 面 给 出 的 类 
似 例 子 的 数据 稍 有 不 同 ,但 它们 都 很 好 地 例证 了 缺陷 放大 成 本 ) ,由 此 可 以 确定 总 开发 成 
本 (对 我 们 假设 的 例子 而 言 是 有 或 没有 评审 情况 下 的 成 本 ) 。 通 过 这 些 数据 ,在 进行 了 评 
审 的 情况 下 ,开发 和 维护 的 总 成 本 是 783 个 成 本 单位 ,而 在 不 进行 评审 的 情况 下 ,总 成 本 
是 2177 个 成 本 单位 一 一 几乎 是 前 者 的 3 倍 。 

为 了 进行 评审 ,软件 工程 师 必须 花费 时 间 和 精力 ,开发 组 织 也 必须 提供 相应 费用 。 然 
而 上 述 例 子 的 结果 已 经 证 明了 我 们 面临 的 选择 一 一 要 么 现在 付出 ,否则 以 后 会 付出 更 多 。 
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概要 设 记 
uv 详细 设计 
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《缺陷 ) 
图 3-3 缺陷 放大 一 一 有 评审 


3.2 评审 度量 及 其 应 用 


技术 评审 是 软件 工程 实践 所 需要 的 很 多 活动 之 一 ,软件 工程 组 织 要 定义 一 套 可 以 用 
来 评估 其 工作 效率 的 度量 来 理解 每 项 活动 的 有 效 性 。 相 比较 ,一 个 相对 较 小 的 子 集 就 可 
以 提供 有 益 的 见解 。 可 以 为 所 进行 的 每 项 评审 收集 以 下 评审 度量 数据 。 
准备 工作 量 E, 一 一 在 实际 评审 会 议 之 前 评审 一 个 工作 产品 所 需 的 工作 量 ( 单 位 : 
人 时 )。 
评估 工作 量 E, 一 一 实际 评审 工作 中 所 花费 的 工作 量 ( 单 位 : 人 时 )。 
返工 工作 量 E, 一 一 修改 评审 期 间 发 现 的 错误 所 用 的 工作 量 ( 单 位 ， 人 时 )。 
工作 产品 规模 WPS 一 一 被 评审 的 工作 产品 规模 的 衡量 (例如 ,UML 模型 的 数量 、 


文档 的 页 数 或 代码 行 数 ) 。 

。 发 现 的 次 要 错误 Ewino 一 一 发 现 的 可 以 归 为 次 要 错误 的 数量 ( 少 于 预定 的 改 错 工 
作 量 )。 

。 发 现 的 主要 错误 Ewwor 一 一 发 现 的 可 以 归 为 主要 错误 的 数量 (多 于 预定 的 改 错 工 
作 量 ) 。 


通过 将 所 评审 的 工作 产品 类 型 与 所 收集 的 度量 数据 相关 联 ,这 些 度量 数据 可 以 进 一 
步 细 化 。 


3.2.1 分 析 度 量 数据 


总 评审 工作 量 Eis 和 发 现 的 错误 总 数 Eee. 定义 为 : 


条 | 一 一 
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Eiew = EE.+E, 
En = Ea Bs 
错误 密度 表示 评审 的 每 单位 工作 产品 发 现 的 错误 数 : 
错误 密度 二 Ew/ WPS 
例如 ,如果 评 审 需求 模型 已 发 现 错误 ,不一致 和 遗漏 之 处 ,将 有 可 能 以 一 些 不 同 的 方 
式 计算 错误 密度 。 需 求 模 型 的 描述 性 材料 共有 32 页 ,其 中 包含 18 个 UML 图 。 评 审 发 
现 18 处 次 要 错误 和 4 处 主要 错误 。 因 此 ,Ew 二 22。 错 误 密度 为 每 个 UML 图 1. 2 个 错 
误 , 或 者 说 ,每 页 需求 模型 有 0. 68 个 错误 。 
如 果 是 对 一 些 不 同类 型 的 工作 产品 (如 需求 模型 .设计 模型 代码、 测试 用例 ) 进 行 评 
审 ,可 以 通过 所 有 评审 所 发 现 的 错误 总 数 来 计算 每 次 评审 发 现 的 错误 百分比 。 此 外 ,也 可 
以 计算 每 个 工作 产品 的 错误 密度 。 
在 为 多 个 项 目 收集 到 许多 评审 数据 后 , 便 可 利用 其 错误 密度 的 平均 值 估计 一 个 新 的 
项 目 中 将 发 现 的 错误 数 。 例 如 ,如 果 需 求 模型 的 平均 错误 密度 是 每 页 0. 6 个 错误 ,一 个 新 
的 需求 模型 为 32 页 ,粗略 估计 ,你 的 软件 团队 在 评审 该 文档 时 将 能 发 现 大 约 19 或 20 个 
错误 。 如 果 只 发 现 了 6 个 错误 ,说 明 在 开发 需求 模型 方面 的 工作 非常 出 色 或 者 说 明 评审 
工作 做 得 不 够 彻底 。 在 进行 测试 之 后 ,有 可 能 收集 到 另外 一 些 错误 数据 ,包括 在 测试 期 间 
发 现 和 纠正 错误 所 需要 的 工作 量 ,以 及 软件 的 错误 密度 。 可 以 将 测试 期 间 发 现 和 纠正 错 
误 的 相关 成 本 与 评审 期 间 的 相 比 较 。 


3.2.2 评审 的 成 本 效益 


若 要 实时 地 测量 任何 技术 评审 的 成 本 效益 都 是 困难 的 。 只 有 在 评审 工作 已 完成 ,已 
收集 评审 数据 ,计算 平均 数据 ,并 测量 了 软件 的 下 游 质量 (通过 测试 ) 之 后 ,软件 工程 组 织 
才能 够 对 评审 的 有 效 性 和 成 本 效益 进行 评估 。 

再 来 看 前 面 介绍 的 例子 ,需求 模型 的 平均 错误 密度 确定 为 每 页 0. 6 个 错误 。 修 改 一 
个 次 要 模型 错误 需要 4 人 时 (评审 后 立即 修改 ) ,修改 一 个 主要 需求 错误 需要 18 人 时 。 对 
所 收集 的 评审 数据 进行 分 析 , 发 现 次 要 错误 出 现 的 频 度 比 主要 错误 出 现 的 频 度 高 6 倍 。 
因此 ,可 以 估计 评审 期 间 查 找 和 纠正 需求 错误 的 平均 工作 量 大 约 为 6 人 时 。 

对 于 测试 过 程 中 发 现 的 与 需求 有 关 的 错误 ,查找 和 纠正 的 平均 工作 量 为 45 人 时 (对 
于 错误 的 相对 严重 性 没有 任何 数据 可 用 )。 使 用 提 到 的 平均 数 .我 们 得 到 : 

每 个 错误 节省 的 工作 量 二 Ewing 一 Enviews 二 45 一 6 二 39 人 时 /错误 

由 于 在 需求 模型 评审 时 发 现 了 22 个 错误 ,节省 了 约 858 人 时 的 测试 工作 量 。 这 只 是 
与 需求 有 关 的 错误 ,与 设计 和 代码 相关 的 错误 将 加 入 到 整体 效益 中 。 无 疑 ,节省 的 工作 量 
使 交付 周期 缩短 了 ,上 市 时 间 提 前 了 。 

Karl Wiegers 在 他 的 有 关 同 行 评审 的 书 中 讨论 了 从 大 公司 得 到 的 传闻 数据 ,这 些 大 
公司 已 经 使 用 审查 (一 种 比较 正式 的 技术 评审 ) 作 为 软件 质量 控制 活动 的 一 部 分 。 
Hewlett Packard 称 审 查 有 10 : 1 的 投资 回报 率 , 并 指出 实际 产品 交付 时 间 平 均 提 前 了 
1.8 个 月 。AT&T 公司 表示 ,审查 使 软件 错误 总 成 本 降低 到 原来 的 十 分 之 一 ,质量 提高 
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了 一 个 数量 级 ,而 且 生产 率 提高 了 14% 。 还 有 类 似 的 其 他 效益 报告 。 技 术 评 审 (为 设计 
和 其 他 技术 活动 ) 提 供 了 明显 的 成 本 效益 ,并 且 确 实 节省 了 时 间 。 

但 对 于 许多 软件 开发 人 员 ,这 种 说 法 违反 直觉 。 软 件 开发 人 员 认 为 “评审 需要 时 间 ， 
我 们 没有 多 余 的 时 间 !1”, 他 们 认为 ,在 每 个 软件 项 目 中 ,时 间 是 一 种 宝贵 的 商品 ,评审 “每 
个 工作 产品 细节 ”占用 了 太 多 时 间 。 

先前 提出 的 例子 显示 并 非 如 此 。 更 重要 的 是 ,对 长 期 (20 年 以 上 ) 收 集 的 软件 评审 行 
业 数 据 ,用 图 形 的 方式 定性 地 加 以 概括 ,如 图 3-4 所 示 。 


工作 量 


计划 需求 设计 编码 测试 


部 署 时 间 


图 3-4 有 评审 和 没有 评审 时 花费 的 工作 量 


从 图 3-4 可 以 看 到 ,使 用 评审 时 花费 的 工作 量 在 软件 开发 的 早期 确实 是 增加 的 ,但 是 
评审 的 早期 投入 产生 了 效益 ,因为 测试 和 修改 的 工作 量 减少 了 。 重 要 的 是 ,有 评审 开发 的 
发 布 日 期 比 没有 评审 时 要 快 。 评 审 不 费时 间 , 而 是 节省 时 间 。 


3.3 评审: 正式 程度 


技术 评审 应 该 应 用 某 种 正式 程度 ,该 正式 程度 应 该 适合 所 生产 的 产品 ,项 目的 时 间 线 
和 做 评审 工作 的 人 。 图 3-5 描述 了 技术 评审 的 参考 模型 ,该 
模型 中 的 4 个 特性 有 助 于 决定 进行 评审 的 形式 ,确定 评审 的 
正式 程度 。 评 审 的 正式 程度 的 提高 需要 : 明确 界定 每 位 评 
审 人 员 的 不 同 职责 ;为 评审 进行 充分 的 计划 和 准备 ;为 评审 
定义 清晰 的 结构 (包括 任务 和 内 部 工作 产品 ) ;评审 人 员 对 所 
做 修改 的 后 续 跟踪 。 

为 理解 参考 模型 ,我 们 假设 已 决定 评审 某 网 站 的 界面 
设计 。 可 以 以 各 种 不 同 的 方式 进行 评审 ,从 相对 非 正式 的 
到 极其 严格 的 。 如 果 觉 得 非 正式 的 方法 更 适合 ,可 以 要 求 ” 图 35 技术 评审 参考 模型 
一 些 同事 (同行 ) 检 查 界面 原型 ,努力 发 现 潜在 的 问题 。 大 
家 认为 将 不 进行 事先 准备 ,但 也 可 以 以 合理 的 结构 化 方式 来 评估 原型 一 -首先 查看 布 
局 , 接 下 来 看 是 否 符合 美学 ,之 后 是 导航 选项 等 。 作 为 设计 者 ,你 可 以 记 些 笔记 ,但 不 
用 那么 正式 。 

但 是 ,如 果 界 面 是 整个 项 目 成 败 的 关键 呢 ? 如 果 人 的 生命 依赖 于 完全 符合 人 体 工 
程 学 的 界面 呢 ? 这 时 可 能 会 认为 更 严格 的 做 法 是 必要 的 。 于 是 成 立 一 个 评审 小 组 ,小 
组 中 的 每 个 人 承担 特定 的 职责 一 领导 小 组 工作 、 记 录 发 现 的 问题 .提供 材料 等 。 评 审 


计划 和 筹备 
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之 前 每 个 评审 人 员 将 有 机 会 接触 工作 产品 (该 例 中 即 为 界面 原型 ), 花 时 间 查 找 错误 、 
不 一 致 和 遗漏 。 按 照 评审 之 前 制定 的 议程 执行 一 组 任务 。 正 式 记 录 评 审 的 结果 ,评审 
小 组 根据 评审 结果 对 工作 产品 的 状态 做 出 决议 。 评 审 小 组 的 成 员 可 能 还 核实 是 否 适 
当地 进行 了 修改 。 


3.4 非 正式 评审 


非 正式 评审 包括 与 同事 就 软件 工程 产品 进行 的 简单 桌面 检查 ,以 评审 一 个 工作 产品 
为 目的 的 临时 会 议 (涉及 两 人 以 上 ) ,或 结对 编程 评审 。 

与 同事 进行 的 简单 桌面 检查 或 临时 会 议 是 一 种 评审 。 但 是 ,因为 没有 事先 规划 或 筹 
备 工作 ,没有 会 议 的 议程 或 结构 ,没有 对 发 现 的 错误 进行 后 续 的 跟踪 处 理 ,这 种 评审 的 有 
效 性 大 大 低 于 更 为 正式 的 方法 。 

提高 桌面 检查 评审 效能 的 一 种 方法 是 为 软件 团队 的 每 个 主要 的 工作 产品 制定 一 组 简 
单 评审 检查 单 。 检 查 单 中 提出 的 问题 都 是 常见 问题 ,但 有 助 于 指导 评审 人 员 检 查 工作 产 
品 。 例 如 ,让 我 们 重新 就 上 述 网 站 的 界面 原型 进行 桌面 检查 。 设 计 师 和 同事 使 用 界面 的 
检查 清单 来 检查 原型 ,而 不 是 在 设计 者 的 工作 站 上 简单 地 操作 原型 : 

。 布局 设计 是 否 使 用 了 标准 惯例 ? 是 从 左 到 右 还 是 从 上 到 下 ? 

。 显示 是 否 需 要 滚动 ? 

。 是 否 有 效 使 用 了 不 同 的 颜色 .位置 . 字 体 和 大 小 ? 

。 所 有 导航 选项 或 表示 的 功能 是 否 在 同一 抽象 级 别 ? 

。 所 有 导航 选择 是 否 清楚 地 标明 了 ? 


评审 人 员 指 出 的 任何 错误 和 问题 由 设计 人 员 记 录 下 来 ,以 在 稍 后 进行 解决 。 桌面 检 
查 可 以 以 一 个 特别 的 方式 安排 ,或 者 也 可 以 授权 作为 良好 的 软件 工程 实践 的 一 部 分 。 一 
般 来 说 ,桌面 检查 评审 材料 的 数量 相对 较 少 ,总 体 上 花费 时 间 大 致 为 一 两 个 小 时 。 

结对 编程 方式 是 : 极限 编程 建议 ,两 个 人 一 起 在 一 台 计 算 机 工作 站 上 编写 一 段 代 
码 。 这 提供 了 一 种 机 制 ,可 以 实时 解决 问题 (两 人 智慧 胜 过 一 人 ) 和 提供 实时 的 质量 
保证 。 

结对 编程 的 特点 是 持续 的 桌面 检查 , 它 鼓 励 在 创建 工作 产品 (设计 或 代码 ) 时 进行 
持续 的 审查 ,而 不 是 在 某 个 时 候 安排 评审 。 好 处 是 即时 发 现 错误 ,结果 是 得 到 更 好 的 
工作 产品 质量 。 在 讨论 结对 编程 的 效能 时 ,Williams 和 Kessler 这 样 描述 : 

初步 统计 证 据 表明 ,结对 编程 是 一 种 强大 的 技术 ,可 以 有 效 创造 高 品质 的 软件 产品 。 
两 人 一 起 工作 和 分 享 思 想 共 同 解决 复杂 的 软件 开发 。 他 们 不 断 进 行 检查 彼此 的 产品 ,从 
而 以 最 有 效 的 形式 尽早 去 除 缺 陷 。 此 外 ,他 们 彼此 一 心 一 意 专 注 于 手头 的 任务 。 

一 些 软件 工程 师 认 为 ,结对 编程 的 固有 和 宛 余 是 浪费 资源 。 毕 竟 ,为 什么 给 两 个 人 指派 
一 个 人 可 以 完成 的 工作 ? 其 实 , 如 果 结 对 编程 生产 出 的 工作 产品 的 质量 明显 优 于 单个 人 
的 工作 ,在 质量 方面 的 节约 ,足以 弥补 结对 编程 带 来 的 “元 余 ”。 
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3.5 正式 技术 评审 


正式 技术 评审 (FTR) 是 一 种 由 软件 工程 师 ( 以 及 其 他 人 ) 进 行 的 软件 质量 控制 活动 。 
FTR 的 目标 是 : 

(1) 发 现 软件 的 任何 一 种 表示 形式 中 的 功能 .逻辑 或 实现 上 的 错误 ; 

(2) 验证 评审 中 的 软件 是 否 满足 其 需求 ; 

(3) 保证 软件 的 表示 符合 预先 指定 的 标准 ; 

(4) 获得 以 统一 方式 开发 的 软件 ; 

(5) 使 项 目 更 易于 管理 。 除 此 之 外 ,FTR 还 提供 了 培训 机 会 ,使 初级 工程 师 能 够 了 
解 软件 分 析 、 设 计 和 实现 的 不 同方 法 。 由 于 FTR 的 进行 ,使 大 量 人 员 对 软件 系统 中 原本 
并 不 熟悉 的 部 分 更 为 了 解 , 因 此 ,FTR 还 起 到 了 培训 后 备 人 员 和 促进 项 目 连续 性 的 作用 。 

FTR 实际 上 是 一 类 评审 方式 ,包括 走 查 和 审查 。 每 次 FTR 都 以 会 议 形式 进行 ,只 有 
经 过 适当 的 计划 ,控制 和 参与 ,FTR 才能 获得 成 功 。 


3.5.1 桌 上 检查 


桌 上 检查 是 一 种 传统 的 检查 方法 , 巾 程序 员 检查 自己 编写 的 程序 。 程 序 员 在 程序 通 
过 编译 之 后 ,进行 单元 测试 设计 之 前 ,对 源 程序 代码 进行 分 析 , 对 照 错误 列表 进行 检查 ,对 
程序 推演 测试 数据 ,并 补充 相关 的 文档 ,目的 是 发 现 程序 中 的 错误 。 

程序 员 进 行 桌 上 检查 的 主要 项 目 如 下 。 

(1) 检查 变量 的 交叉 引用 表 。 重 点 是 检查 未 说 明 的 变量 和 违反 了 类 型 规定 的 变量 ; 
还 要 对 照 源 程序 ,逐个 检查 变量 的 引用 、 使 用 序列 ;临时 变量 在 某 条 路 径 上 的 重 写 情 况 ,局 
部 变量 全 局 变量 与 特权 变量 的 使 用 。 

(2) 检查 标号 的 交叉 引用 表 。 验 证 所 有 标号 的 正确 性 ;检查 所 有 标号 的 命名 是 否 正 
确 ; 转 向 指定 位 置 的 标号 是 否 正确 。 

(3) 检查 子 程序 \ 宏 函数。 验证 每 次 调用 与 被 调用 位 置 是 否 正确 ;确认 每 次 被 调用 
的 子 程序 、 宏 函数 是 否 存在 ;检验 调用 序列 中 调用 方式 与 参数 顺序 、 个 数 、 类 型 上 的 一 
致 性 。 

(4) 等 价 性 检查 。 检 查 全 部 等 价 变量 类 型 的 一 致 性 ,解释 所 包含 的 类 型 差异 。 

(5) 常量 检查 。 确 认 每 个 常量 的 取 值 和 数 制 .数据 类 型 ;检查 常量 每 次 引用 同 它 的 取 
值 . 数 制 和 类 型 的 一 致 性 。 

(6) 标准 检查 。 用 编程 标准 .C++ 或 Java 等 编程 规范 ,检查 程序 或 手工 检查 程序 中 
违反 标准 的 问题 。 

(7) 风格 检查 。 检 查 在 程序 设计 风格 方面 发 现 的 问题 ,包括 命名 规则 、 变 量 说 明 、 程 
序 格式 、 注 释 的 使 用 、 结 构 化 程序 设计 、 基 本 控制 结构 的 使 用 等 。 

(8) 比较 控制 流 。 比 较 由 程序 员 设 计 的 控制 流 图 和 由 实际 程序 生成 的 控制 流 图 , 寻 
找 和 解释 每 个 差异 ,修改 文档 和 校正 错误 。 
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(9) 选择 、 激 活路 径 。 在 程序 员 设 计 的 控制 流 图 上 选择 路 径 , 再 到 实际 的 控制 流 图 上 
激活 这 条 路 径 。 如 果 选 择 的 路 径 在 实际 控制 流 图 上 不 能 激活 , 则 源 程序 可 能 有 错 。 用 这 
种 方法 激活 的 路 径 集合 应 保证 源 程序 模块 的 每 行 代码 都 被 检查 , 即 桌 上 检查 应 至 少 完成 
语句 覆盖 。 

(10) 对 照 程序 的 规格 说 明 ,详细 阅读 源 代 码 。 程 序 员 对 照 程序 的 规格 说 明 书 、 规 定 
的 算法 和 程序 设计 语言 的 语法 规则 ,仔细 阅读 源 代 码 , 逐 字 逐 句 进行 分 析 和 思考 ,比较 实 
际 的 代码 和 期 望 的 代码 ,从 它们 的 差异 中 发 现 程序 的 问题 和 错误 。 

(11) 补充 文档 。 桌 上 检查 中 的 文档 是 一 种 过 渡 性 文档 ,不 是 公开 的 正式 文档 。 通 过 
编写 文档 ,也 是 对 程序 的 一 种 下 意识 的 检查 和 测试 ,可 以 帮助 程序 员 发 现 和 抓 住 更 多 的 错 
误 。 管 理 部 门 可 以 通过 审查 桌 上 检查 文档 ,了 解 模块 的 质量 、 完 全 性 、 测 试 方法 和 程序 员 
的 能 力 。 这 种 文档 的 主要 内 容 如 下 : 
建立 小 型 的 数据 词典 ,描述 程序 中 出 现 的 每 一 种 数据 结构 ,变量 和 寄存 器 的 用 法 ， 
建立 相应 的 各 种 交叉 引用 表格 。 
描述 主要 的 路 径 和 异常 的 路 径 ,为 槛 盖 测 试 准备 条 件 。 

当 测 试 采用 逻辑 驱动 时 , 即 利用 判定 表 或 布尔 代数 方法 来 确定 逮 辑 覆盖 时 ,应 讨 
论 逻 辑 情况 。 此 外 ,在 状态 测试 情形 , 即 考虑 模块 中 状态 的 组 合 和 状态 的 迁移 时 
对 状态 控制 变量 进行 设计 ,以 及 利用 语法 制导 的 测试 ,也 都 要 讨论 逻辑 情况 。 要 
使 文档 编制 适应 测试 技术 。 

以 纯粹 的 功能 术语 来 描述 输入 与 输出 。 

描述 全 部 已 知 的 限制 和 假定 。 

描述 全 部 的 接口 和 对 接口 的 假定 。 

这 种 桌 上 检查 ,由 于 程序 员 熟 悉 自 己 的 程序 和 自身 的 程序 设计 风格 ,可 以 节省 很 多 的 
检查 时 间 ,但 应 避免 主观 片面 性 。 

对 大 多 数 人 而 言 , 桌 上 检查 的 效率 相当 低 。 其 中 一 个 原因 是 , 它 是 一 个 完全 没有 约束 
的 过 程 。 男 一 个 重要 的 原因 是 它 违反 了 软件 测试 的 原则 , 即 人 们 一 般 不 能 有 效 地 测试 自 
己 编写 的 程序 。 因 此 桌 上 检查 最 好 由 其 他 人 而 非 该 程序 的 编写 人 员 来 完成 (例如 ,两 个 程 
序 员 可 以 相互 交换 各 自 的 程序 ,而 不 是 检查 自己 的 程序 )。 但 是 即使 这 样 ,其 效果 仍然 逊 
色 于 走 查 或 代码 检查 。 原 因 在 于 代码 检查 和 代码 走 查 小 组 中 存在 着 互相 促进 的 效应 。 


3.5.2 代码 走 查 


代码 互 查 是 日 常 工 作 中 使 用 最 多 的 ,而 走 查 是 一 种 相对 比较 正式 的 代码 评审 过 程 。 
在 此 过 程 中 ,设计 者 或 程序 员 引导 小 组 部 分 成 员 通 读 编码 ,其 他 成 员 提出 问题 并 对 有 关 技 
术 、 风 格 、 可 能 的 错误 ,是 否 有 违背 开发 标准 /规范 的 地 方 等 进行 评论 。 走 查 过 程 中 ,由 测 
试 成 员 提出 一 批 测试 实例 ,在 会 议 上 对 每 个 测试 实例 用 头脑 来 执行 程序 ,在 纸 上 或 黑板 上 
演示 程序 的 状态 。 在 这 个 过 程 中 ,测试 实例 并 不 起 关键 作用 ,它们 仅 作 为 怀疑 程序 逻辑 与 
计算 错误 的 参照 。 大 多 数 走 查 中 ,在 怀疑 程序 的 过 程 中 所 发 现 的 缺陷 比 通过 测试 实例 本 
身 发 现 的 缺陷 更 多 。 编 程 者 对 照 讲解 设计 框图 和 源码 图 ,特别 是 对 两 者 相 异 之 处 加 以 解 
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释 , 有 助 于 验证 设计 和 实现 之 间 的 一 致 性 。 
3.5.3 评审 会 议 


会 议 审 查 是 一 种 正式 的 检查 和 评估 方法 ,实践 证 明 这 是 一 种 有 效 的 检查 方法 , 它 是 拿 
代码 与 标准 和 规范 对 照 的 补充 ,用 逐步 检查 源 代码 中 有 无 逻辑 或 语法 错误 的 办 法 来 检测 
故障 。 会 议 审 查 不 但 需要 软件 开发 者 自 查 , 还 要 组 织 代码 检查 小 组 进行 代码 检查 。 代 码 
检查 小 组 通常 由 独立 的 仲裁 人 \ 程 序 编写 小 组 ,其 他 组 程序 员 和 测试 小 组 成 员 组 成 。 代 码 
检查 的 程序 是 : 仲裁 人 提前 把 程序 目录 表 和 设计 说 明 分 配给 小 组 各 成 员 ,小 组 成 员 在 开 
会 前 先 熟悉 这 些 材料 ,然后 开会 。 在 会 上 的 主要 工作 如 下 

。 由 程序 编写 小 组 成 员 逐 句 阐明 程序 的 逻辑 ,在 此 过 程 中 可 由 程序 员 或 测试 小 组 成 

员 提 出 问题 ,追踪 缺陷 是 否 存 在 。 
。 利用 公用 程序 设计 缺陷 表 来 分 析 讨论 。 仲 裁 人 负责 保证 讨论 沿 着 建设 性 方向 进 
行 ,而 其 他 人 则 集中 注意 力 发 现 缺 陷 。 

。 在 会 议 之 后 把 发 现 的 缺陷 填 人 表 中 交 给 程序 开发 小 组 。 如 发 现 重 大 缺陷 ,那么 在 

改正 缺陷 之 后 ,还 要 重新 开 评 审 会 议 。 

不 论 选 用 何 种 FTR 方式 ,每 个 评审 会 议 都 应 该 遵守 以 下 约束 : 

。 评审 会 (通常 ) 应 该 由 3 一 5 人 参加 。 

。 应 该 提前 进行 准备 ,但 是 占用 每 人 的 工作 时 间 应 该 不 超过 2 小 时 。 

。 评审 会 的 时 间 应 该 少 于 2 小 时 。 

考虑 到 这 些 限制 ,显然 FTR 应 该 关注 的 是 整个 软件 中 的 某 个 特定 ( 且 较 小 的 ) 部 分 。 
比如 说 ,只 走 查 各 个 构件 或 者 一 小 部 分 构件 ,不 要 试图 评审 整个 设计 。FTR 关注 的 范围 
越 小 ,发 现 错误 的 可 能 性 越 大 。 

FTR 关注 的 是 某 个 工作 产品 (例如 ,一 部 分 需求 模型 一 份 详细 的 构件 设计 ,一 个 构 
件 的 源 代码 )。 开 发 这 个 工作 产品 的 个 人 (生产 者 ) 通 知 项 目 负 责 人 “该 工作 产品 已 经 完 
成 ,需要 进行 评审 "。 项 目 负责 人 与 评审 主席 取得 联系 ,由 评审 主席 负责 评估 该 工作 产品 
是 否 准 备 就 绪 , 制 作 产品 材料 副本 ,并 将 这 些 副 本 分 发 给 2 到 3 位 评审 员 以 便 事先 做 准 
备 。 每 位 评审 员 应 该 用 1 到 2 个 小 时 来 评审 该 工作 产品 ,通过 做 笔记 或 者 其 他 方法 熟悉 
该 工作 产品 。 与 此 同时 ,评审 会 主席 也 应 该 评审 该 工作 产品 ,并 制定 评审 会 议 的 日 程 表 ， 
通常 会 安排 在 第 二 天 开会 。 

评审 会 议 由 评审 会 主席 、 所 有 评审 员 和 开发 人 员 参 加 。 其 中 一 位 评审 员 还 充当 记录 
员 的 角色 ,负责 记录 (书面 的 ) 在 评审 过 程 中 发 现 的 所 有 重要 问题 。FTR 一 般 从 介绍 会 议 
日 程 并 由 开发 人 员 做 简单 的 介绍 开始 。 然 后 由 开发 人 员 “ 走 查 ” 该 工作 产品 ,并 对 材料 做 
出 解释 ,而 评审 员 则 根据 预先 的 准备 提出 问题 。 当 发 现 了 明确 的 问题 或 错误 时 ,记录 员 逐 
一 加 以 记录 。 

在 评审 结束 时 ,所 有 FTR 与 会 者 必须 做 出 以 下 决定 中 的 一 个 : 

Q@ 可 以 不 经 修改 而 接受 该 工作 产品 ; 

@ 由 于 严重 错误 而 否决 该 工作 产品 (错误 改正 后 必须 再 次 进行 评审 ); 
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回 暂时 接受 该 工作 产品 (发 现 了 一 些 必须 改正 的 小 错误 ,但 是 不 再 需要 进行 评审 ) 。 
做 出 决定 之 后 ,所 有 FTR 与 会 者 都 需要 签名 ,以 表示 他 们 参加 了 此 次 FTR ,并且 同 意 评 
审 小 组 所 做 的 决定 。 

评审 通过 的 准则 如 下 : 

。 充分 审查 了 所 规定 的 代码 ,并 且 全 部 编码 准则 被 遵守 。 

。 审查 中 发 现 的 错误 已 全 部 修改 。 


3.5.4 检查 表 


检查 过 程 所 采用 的 主要 技术 是 设计 与 使 用 缺陷 检查 表 。 这 个 表 通 常 是 把 程序 设计 中 
可 能 发 生 的 各 种 缺陷 进行 分 类 ,以 每 一 类 列举 尽 可 能 多 的 典型 缺陷 ,然后 把 它们 制 成 表 
格 , 以 供 在 会 议 中 使 用 ,并 且 在 每 次 审议 会 议 之 后 ,对 新 发 现 的 缺陷 也 要 进行 分 析 和 归 类 ， 
不 断 充实 缺陷 检查 表 。 缺 陷 检查 表 会 因 项 目 不 同 而 不 同 ,在 实际 工作 中 不 断 积 累 完善 ,使 
用 缺陷 检查 表 的 目的 是 防止 人 为 的 政 漏 。 表 3-1 就 是 一 个 代码 检查 表 的 一 个 例子 ,这 个 
示例 对 结构 化 编程 测试 具有 普遍 和 通用 的 意义 。 


表 3-1 代码 评审 的 通用 检查 表 


代码 评审 的 通用 检查 表 
1. 格式 
。 嵌 套 的 计 是 否 正 确 地 缩 进 ? 
。 注释 是 否 准确 并 有 意义 ? 
。 是 否 使 用 有 意义 的 标号 ? 
。 代码 是 否 基本 上 与 开始 时 的 模块 模式 一 致 ? 
。 是 否 遵循 全 套 的 编程 标准 ? 
2. 程序 语言 的 使 用 
。 是 否 使 用 一 个 或 一 组 最 佳 动词 ? 
。 模块 中 是 否 使 用 完整 定义 的 语言 的 有 限 子 集 ? 
。 是 否 使 用 了 适当 的 转移 语句 ? 
3. 数据 引用 错误 
是 否 引用 了 未 初始 化 的 变量 ? 
数组 和 字符 串 的 下 标 是 整数 值 吗 ? 下 标 总 是 在 数组 和 字符 串 大 小 范围 之 内 吗 ? 
是 否 在 应 该 使 用 常量 的 地 方 使 用 了 变量 ? 例如 在 检查 数组 范围 时 。 
变量 是 否 被 赋予 了 不 同类 型 的 值 ? 
为 引用 的 指针 分 配 内 存 了 吗 ? 
一 个 数据 结构 是 否 在 多 个 函数 或 者 子 程序 中 引用 ,在 每 一 个 引用 中 明确 定义 了 结构 了 吗 ? 
4. 数据 声明 错误 
。 所 有 变量 都 赋予 正确 的 长 度 、 类 型 和 存储 类 了 吗 ? 例如 ,在 本 应 声明 为 字符 串 的 变量 声明 为 
字符 数组 了 。 
变量 是 否 在 声明 的 同时 进行 了 初始 化 ? 是 否 正确 初始 化 并 与 其 类 型 一 致 ? 
变量 有 相似 的 名 称 吗 ? 是 否 自 定义 变量 使 用 了 系统 变量 名 ? 
存在 声明 过 但 从 未 引用 或 者 只 引用 过 一 次 的 变量 吗 ? 
在 特定 模块 中 所 有 变量 都 显 式 声明 了 吗 ? 如 果 没 有 ,是 否 可 以 理解 为 该 变量 与 更 高 级 别 的 模 
块 共享 ? 
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. 计算 错误 


计算 中 是 否 使 用 了 不 同 数据 类 型 的 变量 ? 例如 ,将 整数 与 浮 点数 相 加 。 

计算 中 是 否 使 用 了 不 同 数据 类 型 相同 但 长 度 不 同 的 变量 ? 例如 ,将 字 节 与 字 相 加 。 
计算 时 是 否 了 解 和 考虑 到 编译 器 对 类 型 和 长 度 不 一 致 的 变量 的 转换 规则 ? 

赋值 的 目的 变量 是 否 小 于 赋值 表达 式 的 值 ? 

在 数值 计算 过 程 中 是 否 可 能 出 现 溢出 ? 

除数 / 模 是 否 可 能 为 零 ? 

对 于 整 型 算术 运算 ,特别 是 除法 的 代码 处 理 是 否 会 丢失 精度 ? 

变量 的 值 是 否 超过 有 意义 的 范围 ? 

对 于 包含 多 个 操作 数 的 表达 式 , 求 值 的 次 序 是 否 混乱 ? 运算 优先 级 对 吗 ? 


.比较 错误 


比较 正确 吗 ? 虽然 听 起 来 容易 ,但 是 比较 中 应 该 是 小 于 还 是 小 于 或 等 于 常常 发 生 混淆 。 
存在 分 数 或 者 浮 点 值 之 间 的 比较 吗 ? 如 果 有 ,精度 问题 会 影响 比较 吗 ? 

每 一 个 逻辑 表达 式 都 正确 表达 了 吗 ? 逻辑 计算 如 期 进行 了 吗 ? 求 值 次序 有 疑问 吗 ? 
逻辑 表达 式 的 操作 数 是 逻辑 值 吗 ? 例如 ,是 否 包含 整数 值 的 整 型 变量 用 于 逻辑 计算 中 ? 


.人口 和 出 口 的 连接 


初始 入 口 和 最 终 出 口 是 否 正确 ? 

对 另 一 个 模块 的 每 一 次 调用 是 否 恰当 ? 例如 ,全 部 所 需 的 参数 是 否 传送 给 每 一 个 被 调用 的 模 
块 ? 被 传送 的 参数 值 是 否 正确 地 设置 ? 对 关键 的 被 调用 模块 的 意外 情况 (如 丢失 ,混乱 ) 是 否 
处 理 ? 

每 个 模块 的 代码 是 否 只 有 一 个 入口 和 一 个 出 口 ? 


. 存储 器 的 使 用 


每 个 域 , 在 其 第 一 次 被 使 用 前 是 否 正确 初始 化 ? 
规定 的 域 正 确 否 ? 
每 个 域 是 否 有 正确 的 变量 类 型 声明 ? 


. 控制 流程 错误 


如 果 程 序 包含 begin-end 和 do-while 等 语句 组 ,end 是 否 对 应 ? 程序 ,模块 . 子 程序 和 循环 能 否 
终止 ? 如 果 不 能 ,可 以 接受 吗 ? 

可 能 存在 永远 不 停 地 循环 吗 ? 

存在 循环 从 不 执行 吗 ? 如 果 是 这 样 , 可 以 接受 吗 ? 

如 果 程 序 包含 像 switch-case 语句 这 样 的 多 个 分 支 ,索引 变量 能 超出 可 能 的 分 支 数目 吗 ? 如 果 
超出 ,该 情况 能 正确 处 理 吗 ? 

是 否 存 在 “丢掉 一 个 ”错误 ,导致 意外 进入 循环 ? 

代码 执行 路 径 是 否 已 全 部 覆盖 ? 是 否 能 保证 每 条 源 代码 语句 至 少 执行 一 次 ? 


. 子 程序 参数 错误 


子 程序 接收 的 参数 类 型 和 大 小 与 调用 代码 发 送 的 匹配 吗 ? 次 序 正确 吗 ? 
如 果子 程序 有 多 个 人 口 点 ,引用 的 参数 是 否 与 当前 入 口 点 没有 关联 ? 
常量 当做 形式 参数 传递 时 ,是 否 意外 在 子 程序 中 改动 ? 

子 程序 是 否 更 改 了 仅 作为 输入 值 的 参数 ? 

每 一 个 参数 的 单位 是 否 与 相应 的 形 参 匹配 ? 

如 果 存 在 全 局 变量 ,在 所 有 引用 子 程序 中 是 否 有 相似 的 定义 和 属性 ? 


. 输入 输出 错误 


软件 是 否 严格 遵守 外 部 设备 读 写 数 据 的 专用 格式 ? 

文件 或 者 外 设 不 存在 或 者 未 准备 好 的 错误 情况 有 处 理 吗 ? 

软件 是 否 处 理 外 部 设备 未 连接 ,不 可 用 或 者 读 写 过程 中 存储 空间 占 满 等 情况 ? 
软件 以 预期 方式 处 理 预计 的 错误 吗 ? 

检查 错误 提示 信息 的 准确 性 、 正 确 性 、 语 法 和 拼写 了 吗 ? 
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12. 逻辑 和 性 能 

。 全 部 设计 已 实现 否 ? 

。 逻辑 被 最 佳 地 编码 否 ? 

。 提供 正式 的 错误 /例外 子 程序 否 ? 

。 每 一 个 循环 执行 正确 的 次 数 否 ? 

13. 维护 性 和 可 靠 性 

。 清单 格式 适 于 提高 可 读 性 否 ? 

。 标号 和 子 程序 符合 代码 的 逻辑 意义 否 ? 
。 对 从 外 部 接口 采集 的 数据 有 确认 否 ? 
。 遵循 可 靠 性 编程 要 求 否 ? 

。 是 否 存在 内 存 泄漏 的 问题 ? 


3.5.5 评审 报告 和 记录 保存 


在 FTR 期 间 , 由 一 名 评审 员 ( 记 录 员 ) 主 动 记 录 所 有 提出 的 问题 。 在 评审 会 议 结束 时 
要 对 这 些 问 题 进行 汇总 ,并 生成 一 份 * 评 审问 题 清单 ”。 此 外 ,还 要 完成 一 份 * 正 式 技术 评 
审 总 结 报告 ”。 评 审 总 结 报告 中 要 回答 以 下 3 个 问题 : 

(1) 评审 的 产品 是 什么 ? 

(2) 谁 参与 了 评审 ? 

(3) 发 现 的 问题 和 结论 是 什么 ? 

评审 总 结 报告 通常 只 是 一 页 纸 的 形式 (可 能 还 有 附件 )。 它 是 项 目 历史 记录 的 一 部 
分 ,有 可 能 将 其 分 发 给 项 目 负 责 人 和 其 他 感 兴趣 的 参与 方 。 

评审 问题 清单 有 两 个 作用 : 标识 产品 中 存在 问题 的 区 域 ; @ 作 为 行动 条 目 检 查 单 
以 指导 开发 人 员 进 行 改正 。 通 常 将 评审 问题 清单 附 在 总 结 报告 的 后 面 。 

为 了 保证 评审 问题 清单 中 的 每 一 条 都 得 到 适当 的 改正 ,建立 跟踪 规程 非常 重要 。 只 
有 做 到 这 一 点 ,才能 保证 提出 的 问题 真正 得 到 “解决 "。 方 法 之 一 就 是 将 跟踪 的 责任 指派 
给 评审 会 主席 。 


3.5.6 评审 指导 原则 


进行 正式 技术 评审 之 前 必须 制定 评审 的 指导 原则 ,并 分 发 给 所 有 评审 员 以 得 到 大 家 
的 认可 ,然后 才能 依照 它 进行 评审 。 不 受 控制 的 评审 通常 比 没有 评审 还 要 糟糕 。 下 面 列 
出 了 最 低 限 度 的 一 组 正式 技术 评审 指导 原则 。 

(1) 评审 工作 产品 ,而 不 是 评审 开发 人 员 。FTR 涉及 他 人 和 自己 。 如 果 进 行 得 适 
当 ,FTR 可 以 使 所 有 参与 者 体会 到 温暖 的 成 就 感 。 如 果 进行 得 不 适当 , 则 可 能 陷入 一 种 
审问 的 气氛 之 中 。 应 该 温和 地 指出 错误 ,会 议 的 气氛 应 该 是 轻松 的 和 建设 性 的 ,不 要 试图 
贬低 或 差 辱 他 人 。 评 审 会 主席 应 该 引导 评审 会 议 一 一 确保 维护 适当 的 气氛 和 态度 ,应 立 
即 终止 已 变 得 失控 的 评审 。 

(2) 制定 并 遵守 日 程 表 。 各 种 类 型 会 议 的 主要 缺点 之 一 就 是 放任 自流 。 必 须 保证 
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FTR 不 要 离 题 且 按照 计划 进行 。 评 审 主席 负 有 维持 会 议程 序 的 责任 ,在 有 人 转移 话题 时 
应 该 提醒 他 。 

(3) 限制 争论 和 辩驳 。 当 评审 员 提 出 问题 时 ,未 必 所 有 人 都 认同 该 问题 的 严重 性 。 
不 要 花 时 间 去 争论 这 类 问题 ,这 类 问题 应 该 被 记录 在 案 , 留 到 会 后 进行 讨论 。 

(4) 要 阐明 问题 ,但 是 不 要 试图 解决 所 有 记录 的 问题 。 评 审 不 是 一 个 解决 问题 的 会 
议 ,问题 的 解决 应 该 由 开发 人 员 自 己 或 是 在 别人 帮助 下 放 到 评审 会 之 后 进行 。 

(5) 做 笔记 。 有 时 候 让 记录 员 在 黑板 上 做 笔记 是 一 种 很 好 的 方式 ,这 样 ,在 记录 员 记 
录 信 息 时 ,其 他 评审 员 可 以 推荐 措辞 ,并 确定 问题 的 优先 次 序 。 或 者 ,笔记 可 直接 输入 到 
笔记 本 电脑 。 

(6) 限制 参与 者 人 数 , 并 坚持 事先 做 准备 。 虽 然 2 个 人 比 1 个 人 好 ,但 14 个 人 并 不 
一 定 就 比 4 个 人 好 。 应 该 根据 需要 将 参与 评审 的 人 员 数 量 限制 到 最 低 ,而 且 所 有 参与 评 
审 的 小 组 成 员 都 必须 事先 做 好 准备 。 评 审 会 主席 应 该 向 评审 员 要 求 书面 意见 (以 表明 评 
审 员 的 确 对 材料 进行 了 评审 ) 。 

(7) 为 每 个 将 要 评审 的 工作 产品 建立 检查 清单 。 检 查 清单 能 够 帮助 评审 会 主席 组 织 
FTR 会 议 , 并 帮助 每 位 评审 员 将 注意 力 集中 到 重要 问题 上 。 应 该 为 分 析 、` 设 计 、 代 码 、 甚 
至 测试 等 工作 产品 建立 检查 清单 。 

(8) 为 FTR 分 配 资源 和 时 间 。 为 了 进行 有 效 的 评审 ,应 该 将 评审 作为 软件 过 程 中 的 
任务 列 和 进度 计划 ,而 且 还 要 为 由 评审 结果 所 引发 的 不 可 避免 的 修改 活动 分 配 时 间 。 

(9) 对 所 有 评审 员 进 行 有 意义 的 培训 。 为 了 提高 效率 ,所 有 评审 参与 者 都 应 该 接受 
某 种 正式 培训 。 培 训 要 强调 的 不 仅 有 与 过 程 相关 的 问题 ,而 且 还 应 该 涉及 评审 的 心理 学 
方面 。Freedman 和 Weinberg 估计 每 20 人 进行 为 期 一 个 月 的 学 习 , 将 能 够 有 效 地 参与 
评审 。 

(10) 评审 以 前 所 做 的 评审 。 听 取 汇 报 对 发 现 评审 过 程 本 身 的 问题 十 分 有 益 , 最 早 被 
评审 的 工作 产品 本 身 就 是 评审 的 指导 原则 。 

由 于 成 功 的 评审 涉及 许多 变数 (如 参与 者 数量 工作 产 品类 型 .时间 和 长 度 、 特 定 的 评 
审 方法 等 ) ,软件 组 织 应 该 在 实验 中 确定 何 种 方法 对 自己 的 特定 环境 最 为 适用 。 


3.5.7 样本 驱动 评审 


在 理想 情况 下 ,每 个 软件 工程 工作 产品 都 要 经 过 正式 技术 评审 。 但 在 实际 的 软件 项 
目 中 ,由 于 资源 有 限 和 时 间 不 足 , 即 使 意识 到 评审 是 一 种 质量 控制 的 机 制 ,评审 也 常常 被 
省 略 。 

Thelin 和 他 的 同事 提出 了 样本 驱动 评审 过 程 ,在 这 个 过 程 中 ,要 对 所 有 软件 工程 工 
作 产 品 的 样本 进行 审查 ,以 决定 哪些 工作 产品 是 最 有 错误 倾向 的 ,然后 集中 全 部 FTR 资 
源 , (根据 抽 样 过 程 中 收集 的 数据 ) 只 分 配给 那些 可 能 具有 错误 倾向 的 工作 产品 。 

为 了 提高 效率 ,样本 驱动 评审 过 程 必须 对 作为 整个 FTR 的 主要 目标 的 那些 工作 产品 
进行 量化 。 量 化 时 一 般 采 用 以 下 步 又: 

(1) 审查 每 个 软件 工作 产品 i 的 若干 分 之 一 , 记 做 1/ai ,记录 在 其 中 发 现 的 缺陷 数 
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量 fi。 

(2) 用 所 除 以 a; 可 得 到 在 工作 产品 i 中 缺陷 数量 的 粗略 估算 值 。 

(3) 按照 缺陷 数量 粗略 估算 值 的 递减 次 序 排列 这 些 工作 产品 。 

(4) 将 现 有 的 评审 资源 集中 到 那些 具有 最 高 缺陷 数量 估算 值 的 工作 产品 上 。 

从 工作 产品 中 抽样 的 这 一 小 部 分 必须 能 代表 整个 工作 产品 ,并 且 要 足够 大 ,对 进行 抽 
样 的 评审 者 来 说 有 意义 。 当 a; 增 大 时 ,样本 有 效 代表 工作 产品 的 可 能 性 也 随 之 增长 ,而 进 
行 抽 样 所 需要 的 资源 也 随 之 增长 。 开 发 各 种 类 型 的 工作 产品 时 。 软 件 工程 团队 必须 确定 
w 的 最 佳 取 值 。 


3.6 ”QESuite 软件 测试 管理 平台 


在 历年 全 国 计 算 机 等 级 考试 (四 级 ) 的 软件 测试 工程 师 考试 中 ,第 2 部 分 “论述 题 " 中 
都 安排 有 基于 QESuite Web Version 1.0 软件 应 用 的 软件 测试 过 程 管理 实践 考试 内 容 。 
为 此 ,我 们 在 这 里 简单 介绍 一 下 该 软件 ,如 果 要 参加 该 项 考试 ,读者 应 参考 历年 相关 考题 
的 分 析 , 掌 握 这 类 题目 的 答题 方法 , 受 篇 幅 限制 本 书 不 做 详细 叙述 。 

QESuite 软件 测试 过 程 管理 工具 由 北京 航空 航天 大 学 软件 工程 研究 所 研发 ,基于 
C/S 结构 和 B/S 结构 ,面向 软件 产品 的 整个 生命 周期 ,该 软件 实现 对 测试 过 程 、 测 试 对 象 
和 测试 数据 的 有 效 管理 ,指导 用 户 实施 测试 过 程 改进 ,满足 了 开发 企业 对 于 测试 管理 的 需 
求 ,适用 于 各 类 软件 企业 对 其 软件 测试 过 程 进行 有 效 的 管理 。 


3.6.1 QESuite 系统 的 功能 特点 


QESuite 系统 的 功能 特点 主要 是 : 

(1) 软件 测试 过 程 全 面 管 理 。QESuite 可 以 同时 管理 多 个 正在 进行 的 软件 测试 项 
目 。 同 时 可 对 软件 产品 从 划分 功能 分 类 、 分 配 相关 人 员 编写 测试 用 例 、 执 行 测试 用 例 到 
生成 问题 报告 的 整个 测试 流程 进行 系统 有 效 的 管理 。 项 目 管理 人 员 可 以 通过 该 系统 随 
时 了 解 ,监控 被 测 项 目的 执行 进度 和 软件 问题 的 处 理 状态 ,为 测试 人 员 和 开发 人 员 的 工作 
提供 有 效 的 考核 依据 ,保障 软件 开发 和 测试 的 顺利 进行 。 

(2) 待 测 软件 产品 功能 分 类 机 制 确保 测试 覆盖 率 。QESuite 能 协助 项 目 管理 人 员 对 
待 测 软件 产品 的 各 功能 区 域 进行 续 密 划分 ,从 而 可 避免 待 测 软件 功能 区 域 的 重复 或 遗漏 ， 
同时 可 便于 项 目 管理 人 员 分 配 测试 工作 。QESuite 可 管理 的 测试 系统 划分 深度 可 以 满足 
各 类 大 中 型 软件 产品 测试 的 需要 。 

(3) 对 测试 用 例 与 软件 问题 报告 的 数据 库 管 理 。QESuite 使 软件 开发 企业 可 以 脱离 
原 有 的 纸张 与 电子 表格 等 原始 的 文档 记录 方式 ,采用 Lotus Notes 或 SQL 等 大 型 数据 库 
管理 方式 。 无 论 是 开发 人 员 ,测试 人 员 或 项 目 管理 人 员 都 可 以 随时 编写 ,修改 和 查阅 测试 
用 例 和 软件 问题 报告 ,并 可 对 测试 用 例 与 软件 问题 报告 进行 长 期 保存 ,避免 了 测试 用 例 与 
软件 问题 报告 的 流失 。 

(4) 测试 用 例 执行 与 软件 问题 处 理 过 程 的 全 程 跟踪 。QESuite 可 对 测试 用 例 的 编写 
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与 执行 情况 进行 全 程 记录 ,便于 项 目 管理 人 员 追 踪 测 试用 例 在 各 个 测试 阶段 的 执行 过 程 ， 
及 时 调整 测试 策略 与 方法 ,并 可 记录 软件 问题 从 发 现 、 分 析 到 解决 的 整个 状态 转换 过 程 和 
人 员 操 作 记 录 , 便 于 项 目 管 理 人 员 追 溯 软 件 问题 处 理 的 各 个 过 程 , 有 助 于 进一步 提高 软件 
问题 的 处 理 质量 与 软件 质量 。 

(5) 统一 的 测试 用 例 与 软件 问题 模板 。QESuite 提供 了 统一 的 软件 问题 报告 模板 与 
测试 用 例 模板 ,使 测试 人 员 能 够 更 加 准确 \ 详 细 地 编写 测试 用 例 与 描述 软件 问题 ,保证 了 
测试 用 例 与 软件 问题 报告 描述 的 一 致 性 ,便于 对 测试 用 例 与 软件 问题 的 积累 、 分 类 与 
查询 。 

(6) 软件 问题 生命 期 状态 的 科学 定义 。 科 学 划分 软件 问题 生命 周期 主 状态 及 子 状 
态 , 可 以 帮助 用 户 详细 记录 、 跟 踪 和 管理 软件 问题 的 生命 周期 全 过 程 。 基 于 此 软件 问题 生 
命 周 期 状态 转换 图 而 定义 的 软件 问题 处 理工 作 流 ,将 测试 部 门 与 开发 部 门 的 工作 结合 在 
一 起 ,将 大 大 提高 软件 问题 的 处 理 效 率 与 准确 性 。 

(7) 实用 的 统计 功能 辅助 管理 决策 。QESuite 具有 实用 的 统计 功能 ,项 目 管理 人 员 
可 以 从 各 种 角度 建立 分 析 统 计 报 表 , 以 便 及 时 掌握 测试 用 例 的 执行 情况 ,软件 问题 的 有 效 
发 现 率 、 有 效 修复 率 和 各 项 测试 工作 的 进度 ,并 进行 全 局 管理 。 

(8) 强大 的 安全 机 制 保障 用 户 的 数据 安全 。QESuite 的 用 户 可 以 根据 人 员 的 分 工 和 
职能 不 同 划 分 严格 的 权限 ,从 而 明确 测试 任务 ,并 保证 系统 数据 的 安全 。QESuite Notes 
版 更 是 构建 在 Lotus Domino/Notes 的 强大 的 安全 机 制 基础 之 上 ,系统 数据 安全 将 更 
有 保证 。 

(9) 不 同 的 运行 环境 。QESuite 有 Web 版 和 Notes 版 两 种 运行 版 本 ,可 适应 不 同 企 
业 对 运行 成 本 和 系统 运行 安全 的 不 同 要 求 。QESuite Notes 版 基于 Lotus Domino/Notes 
构建 ,充分 利用 了 Domino/Notes 的 强大 群 组 协同 能 力 和 强大 的 安全 机 制 ,适合 于 对 系统 
数据 安全 性 要 求 比较 高 的 软件 企业 ,也 适用 于 已 经 拥有 Lotus Domino/Notes 平 台 的 软件 
企业 。 而 QESuite Web 版 基于 B/S 结构 ,运行 环境 简单 ,投入 成 本 低 。 


3.6.2 QESuite Web Version 1.0 


QESuite Web Version 1.0 采用 B/S 结构 ,基于 Windows 系列 平台 ,使 用 Tomcat 作 
为 Web 服务 器 ,后 台 采 用 MS SQL Server 2000 大 型 关系 数据 库 , 通 过 简单 的 配置 , 即 可 
在 网 络 上 构建 软件 测试 过 程 管理 体系 。 

QESuite Web Version 1.0 主要 的 用 户 对 象 是 软件 产品 开发 及 生产 企业 .软件 产品 质 
量 检测 机 构 和 软件 产品 质量 认证 机 构 。 

QESuite Web Version 1.0 的 服务 器 端 有 2 个 主要 部 分 组 成 , 即 应 用 服务 器 和 数据 库 
服务 器 。 

(1) 应 用 服务 器 : Java 2 SDK 和 Apache Tomcat Server。 

(2) 数据 库 服务 器 : Microsoft SQL Server 和 QESuite 数据 库 。 

(3) 客户 端 : Windows XP 和 IE 浏览 器 。 

可 以 将 应 用 服务 器 和 数据 库 服 务 器 安装 在 一 台 服 务 器 上 ,也 可 以 安装 在 不 同 的 服务 
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器 上 。 


3.7 


习题 


请 参考 课文 内 容 以 及 其 他 资料 ,完成 下 列 选 择 题 。 
(1) 下 面 不 属于 桌 上 检查 的 项 目 是 ( We 
A. 检查 小 组 对 程序 进行 模拟 执行 ,以 展示 系统 的 不 同 构件 如 何 相互 作用 ,暴露 
程序 被 忽略 的 细节 
B. 检查 变量 的 交叉 引用 表 , 重 点 是 检查 未 说 明 的 变量 和 违反 了 类 型 规定 的 变量 
C. 选择 激活 路 径 ,检查 程序 的 语句 代码 
D. 比较 由 程序 员 设 计 的 控制 流 图 和 由 实际 程序 生成 的 控制 流 图 ,寻找 和 解释 每 
个 差异 ,修改 文档 和 校正 错误 
(2) 代码 走 查 的 目的 是 ( 入 
A. 发 现 缺 陷 . 遗 漏 和 矛盾 的 地 方 
B. 确认 程序 逻辑 与 程序 规格 说 明 的 一 致 性 
C. 验证 需求 变更 的 一 致 性 
D. 证 明 程 序 确实 是 按照 用 户 的 需求 工作 的 
(3) 走 查 是 一 种 重要 的 审查 方法 ,下 列 所 述 的 审查 活动 中 ,不 属于 走 查 的 是 (  )。 
A. 审查 小 组 的 组 织 者 事先 把 相关 的 设计 文档 、 源 程序 和 其 他 材料 发 给 每 一 个 小 
组 成 员 ,要 求 他 们 预先 了 解 审查 的 内 容 
B. 测试 员 事 先 根 据 审 查 的 源 代 码 准 备 一 批 测试 用 例 
C. 程序 员 在 小 组 审查 会 上 向 全 体 审查 人 员 逐 条 讲解 自己 编写 的 程序 
D. 所 有 参与 审查 的 人 员 集体 扮演 “计算 机 ?的 角色 ,使 用 事先 准备 的 测试 用 例 按 
照 源 程序 规定 的 顺序 逐条 执行 讨论 可 能 出 现 的 问题 
(4) 同行 评审 主要 包括 管理 评审 技术 评 审 、. 过 程 评审 和 ( js 
A. 需求 评审 B. 文档 评审 C. 质量 评审 D. 风险 评审 
(5) 检查 是 否 存在 “已 定义 但 未 使 用 ”的 变量 引用 异常 应 属于 ( ”)。 
A. 静态 分 析 B. 动态 分 析 C. 代码 执行 D. 调试 
(6) 坚持 在 软件 开发 的 各 个 阶段 实施 下 列 哪 种 质量 保证 措施 才能 在 开发 工程 中 尽早 


发 现 和 预防 错误 ,把 出 现 的 错误 克服 在 早期 ?7 (  ) 


A. 技术 评审 B. 程序 测试 C. 文档 审查 D. 管理 评审 
(7) 同行 评审 ,有 时 称 为 同 级 评审 ,是 一 种 通过 作者 的 同行 来 确认 缺陷 和 需要 变更 


办 


域 的 检查 方法 。 它 主要 分 为 管理 评审 、 技 术 评 审 文档 评审 和 ( js 


A. 误差 评审 B. 项 目 评审 C. 过 程 评审 D. 组 织 体系 评审 
(8) 在 代码 检查 过 程 中 发 现 大 部 分 错误 的 人 通常 是 ( }, 
A. 程序 员 B. 测试 员 C. 审查 者 D. 架构 师 
(9) 走 查 是 对 软件 进行 静态 测试 的 一 种 方法 ,以 下 不 属于 走 查 活动 的 是 ( i 
A. 计划 走 查 会 议 
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B. 准备 测试 用 例 
C. 执行 走 查 以 发 现 和 改正 错误 
D. 在 走 查 过 程 中 程序 员 逐 渐 讲 解 自己 的 程序 


3.8 实验 与 思考 
3.8.1 实验 目的 


本 节 *“ 实 验 与 思考 ”的 目的 . 

(1) 熟悉 软件 评审 技术 的 基本 概念 和 基本 内 容 。 通 过 实例 分 析 , 了 解 评审 技术 在 发 
现 设 计 缺 陷 、 降 低 软件 过 程 后 续 活 动 的 成 本 等 方面 所 发 挥 的 重要 作用 。 

(2) 通过 对 论述 题 的 深入 分 析 和 讨论 ,熟悉 和 人 掌握 软件 评审 与 软件 测试 的 基本 方法 。 


3.8.2 工具 /准备 工作 


在 开始 本 实验 之 前 ,请 认真 阅读 课程 的 相关 内 容 。 
需要 准备 一 台 带 有 浏览 器 、 能 够 访问 因特网 的 计算 机 。 


3.8.3 实验 内 容 与 步骤 


参考 本 章 3. 1 节 ,请 分 析 并 回答 问题 1) 一 3) 。 

1) 假设 需求 模型 引入 了 10 个 错误 ,每 个 错误 按 2 : 1 的 比例 在 设计 阶段 放大 ,设计 
阶段 引入 了 另外 20 个 错误 ,并且 这 20 个 错误 按 1.5 : 1 的 比例 在 编码 阶段 放大 ,在 编码 
阶段 又 引入 了 另外 30 个 错误 。 进 一 步 假 设 , 所 有 单元 测试 会 发 现 所 有 错误 的 30% ,集成 
测试 将 找到 剩余 错误 的 30% ,验证 测试 会 发 现 剩余 错误 的 50%。 没 有 进行 评审 ,有 和 多少 
错误 将 被 发 布 到 现场 ? 

答 ， 


2) 重新 考虑 1) 所 述 情形 ,但 现在 假设 进行 了 需求 评审 、 设 计 评 审 和 代码 评审 ,并且 这 
些 步骤 能 有 效 地 发 现 所 有 错误 的 60%。 有 和 多少 错误 将 被 发 布 到 现场 ? 
答 ， 


3) 重新 考虑 1) 和 2) 所 述 情形 ,对 于 每 个 发 布 到 现场 的 错误 ,发 现 和 改正 的 成 本 是 
4800 美元 ,在 评审 时 发 现 并 改正 每 个 错误 花费 240 美元 ,通过 进行 评审 节约 多 少 钱 ? 
答 : 


4) 以 下 是 结构 化 程序 设计 方法 的 设计 过 程 的 流程 图 (图 3-6) ,请 按 要 求 回 答 问题 。 
(1) 请 在 一 白 纸 上 画 出 该 系统 上 交互 行为 的 状态 图 ,并 粘贴 于 此 处 。 
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精 化 数据 流 图 


区 分 事务 中 心 和 区 分 输入 和 

数据 库 接收 通路 输出 分 支 
了 

映射 成 事务 结构 映射 成 变换 结构 


1 
优化 软件 结构 


导出 软件 结构 
1 


: 
N 
详细 设计 


图 3-6 流程 图 


(2) 使 用 基本 路 径 测 试 方法 确定 该 状态 图 的 测试 路 径 。 


Pathl : 

Path2 : 

Path3 : 

5) 考虑 3. 5. 5 节 提 出 的 所 有 评审 准则 ,你 认为 哪 一 条 是 最 重要 的 ,为 什么 ? 
答 : 


3.8.4 实验 总 结 
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3.8.5 实验 评价 (教师 ) 


3.9 阅读 与 分 析 : 21 世纪 的 代码 审查 


导读 : 代码 审查 已 经 被 广泛 地 认可 为 一 种 非常 好 的 做 法 ,现在 很 多 大 公司 比如 
Google 也 在 做 代码 审查 。 代 码 审查 不 仅 可 以 有 助 于 你 的 工作 ,还 能 分 享 知 识 。 原 文 是 
《Code Reviews in the 21st Century》, 现 对 此 文 进行 编译 。 文 章 内容 如 下 : 

在 软件 工程 领域 里 代码 审查 可 以 结束 程序 员 之 间 无 谓 的 争执 。 开 发 者 常常 会 因为 一 
些 思 蠢 的 小 事 斗 嘴 ,冒犯 对 方 ,甚至 是 在 Q&A 问答 之 前 抓 住 Bug 而 喉 喉 不休, 争执 总 是 
围绕 在 你 左右 。OK, 千 万 不 要 误会 我 的 意思 ,因为 我 们 有 理由 相信 代码 审查 绝对 是 个 不 
错 的 好 方法 。 原 因 如 下 : 

(1) 越 早 发 现 Bug 也 就 意味 着 可 降低 项 目 成 本 。 无 须 释放 一 个 修复 补丁 ,因为 它 正 
处 在 开发 阶段 。 

(2) 代码 变 得 越 来 越 重要 。 

(3) 知识 贯穿 于 你 的 团队 中 ,不 再 像 以 前 那样 一 大 块 代码 只 有 某 一 个 人 知道 。 

(4) 开发 者 需要 加 倍 的 努力 。 如 果 开 发 者 知道 别人 要 对 他 的 工作 进行 评估 时 ,就 会 
采取 额外 的 努力 做 好 工作 ,同时 他 还 喜欢 用 文档 注释 标 出 异议 。 

如 今 ,在 21 世纪 的 今天 很 多 项 目 都 没有 使 用 代码 审查 。 本 文 将 提供 8 条 准则 , 供 开 
发 者 学 习 与 参考 。 

1) 永远 别 忘 了 TDD 

再 确认 测试 代码 前 , 先 找 别人 帮 你 检查 下 是 否 无 误 。 在 别人 做 之 前 尽量 检查 出 Bug 
并 且 将 其 处 理 好 。 代 码 审 查 最 重要 规则 是 对 即将 提交 的 代码 中 查找 问题 一 一 你 需要 做 的 
就 是 确认 代码 是 正确 的 。 

2) 尽 可 能 地 自动 化 

这 里 有 几 个 非常 好 的 Java 工具 比如 : PMD、CheckStyle、FindBugs 等 。 问 题 是 当 利 
用 这 些 查找 工具 后 人 们 还 肯 花 时 间 去 做 代码 审查 吗 。 

使 用 这 些 工 具 前 ,为 这 些 工具 制定 一 套 细则 是 非常 重要 的 。 这 能 够 确保 你 使 用 同一 
个 代码 审核 标准 从 而 区 别 于 那些 常 被 用 于 20 世纪 老式 的 代码 审查 规范 。 在 理想 的 状态 
下 ,这 些 工具 可 运行 在 各 种 版 本 控制 系统 上 通过 hook 审查 每 个 代码 。 如 果 该 代码 不 好 
将 被 阻止 在 外 。 

3) 尊重 设计 

在 我 开始 从 事 Java 项 目 早 期 时 ,用 代码 审查 的 方式 已 为 时 已 晚 。 因 为 当 你 检查 代码 
问题 时 实际 上 给 你 的 设计 造成 了 缺陷 。 设 计 模 式 被 误解 ,一 些 繁杂 的 附属 物质 混入 进来 
或 者 开发 者 脱离 了 主题 。 
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审查 会 混乱 你 的 观点 。 或 许 你 会 反驳 :“ 这 是 代码 审查 而 不 是 设计 审查 "。 这 时 一 些 
烂 捧 子 必然 会 接 中 而 至 。 为 了 避免 这 些 问题 发 生 , 我 们 改变 了 设计 的 初衷 。 代 码 审 查 会 
牵连 到 很 多 方面 ,无 论 是 设计 还 是 设计 审查 。 事 实 上 ,我 们 通过 设计 审查 要 比 代码 审查 面 
临 的 冲击 要 多 得 多 。 设 计 需 要 更 高 的 质量 和 灵感 ,我 们 应 该 避免 一 些 复杂 的 思维 。 

4) 统一 的 风格 指南 

即使 是 使 用 自动 化 工具 (诸如 CheckStyle、FindBugs 等 ) 也 应 避免 不 必要 的 风格 冲 
突 , 你 的 项 目 应 该 具备 风格 指南 。( 在 尽 可 能 的 情况 下 ) 坚持 Java 协议 的 规范 标准 ,尝试 
着 为 你 的 项 目 介绍 制定 一 个 “词典 ”, 这 就 意味 着 , 当 涉及 这 个 代码 时 ,查看 该 代码 的 用 法 
和 环境 是 否 适宜 ,这 些 都 很 容易 被 检测 出 。 

5) 挑选 适宜 的 工具 

如 果 开 发 者 都 在 使 用 Eclipse 开发 工具 (Eclipse IDE 插件 Jupiter) ,你 可 以 通过 你 的 
方式 来 查看 代码 、 调 试 代码 甚至 可 使 用 Eclipse IDE 上 的 一 切 东 西 来 帮助 你 在 审查 代码 时 
更 加 地 便捷 。 但 是 ,如 果 大 家 没有 使 用 同一 个 IDE( 或 者 该 IDE 没有 给 你 的 工作 带 来 方 
便 ) 你 可 以 考虑 Review Board, 它 是 个 不 错 的 选择 。 

6) 请 记 住 每 个 项 目 都 不 同 

也 许 你 在 采用 以 前 的 项 目 方法 工作 ,但 是 ,请 记 住 每 个 项 目 之 间 是 不 同 的 。 每 一 个 项 
目 都 有 特定 的 架构 (高 并 发 或 是 高 分 散 ), 有 特定 的 文化 (或 许 很 多 人 喜欢 使 用 Eclipse)， 
并 使 用 特定 的 工具 (maven or ant)。 难 道 你 想 照 靖 芦 画 靳 ?7 OK ,请 记 住 ,不 同 的 项 目 有 
不 同 的 工作 方法 。 

7) 懂得 取舍 

代码 审查 需要 积极 和 细致 而 不 是 卖弄 学 问 。 你 会 因为 一 些 细微 的 琐事 紧张 而 导致 项 
目 失败 或 是 花费 公司 成 本 吗 ? 记 住 , 千 万 不 要 这 样 。 理 清 头 绪 , 换 个 角度 想 想 , 改 变 自己 
的 心态 而 不 是 记 挂 着 去 改变 别人 。 

8) Be buddies 

在 我 看 来 , 称 之 为 “buddy reviews”( 别 人 会 叫 “over the shoulder”) 非 常 好 。A buddy 
review 是 指 与 其 他 团队 成 员 每 隔 一 到 两 天 以 非 正 式 的 形式 讨论 ,并 且 快 速 地 浏览 (5 一 10 
分 钟 ) 对 方 的 代码 。 这 种 方法 可 以 帮助 你 : 

(1) 及 早 地 发 现 问题 ; 

(2) 总 是 很 快 地 知道 该 干什么 ; 

(3) 代码 审查 无 须 过 长 ,因为 你 只 需要 查看 新 的 代码 , 旧 的 代码 会 很 快 赶 上 ; 

(4) 这 种 非 正 式 的 场合 没有 紧张 感 ,很 有 趣 ; 

(5) 可 以 定期 地 交换 想法 。 

buddy reviewing 在 团队 中 是 一 种 很 好 的 工作 方式 , 当 某 人 在 团队 中 出 现 问题 时 可 以 
及 早 地 发 现 。 这 不 仅 可 以 帮助 大 家 ,还 可 以 交换 彼此 的 进度 和 想法 。 

总 之 ,如 果 你 的 项 目 正 在 进行 代码 审查 ,应 该 做 到 快速 有 效 、 不 浪费 别人 的 时 间 。 正 
如 文章 所 说 的 ,这 几 点 非常 重要 。 代 码 审 查 用 意 是 在 代码 提交 前 找到 其 中 的 问题 。 

资料 来 源 : 2012-2-28 10:29, 夏 梦 竹 编译 ,51Testing 软件 测试 网 采编 。 有 删改 。 


第 4 章 软件 测试 策略 


软件 测试 的 目标 是 发 现 错误 。 对 于 传统 软件 ,这 个 目标 是 通过 一 系列 测试 步骤 达到 
的 。 单 元 测试 和 集成 测试 侧重 于 验证 模块 的 功能 以 及 将 模块 集成 到 程序 结构 中 去 ;确认 
测试 验证 软件 需求 的 可 追踪 性 ;系统 测试 在 软件 集成 为 较 大 的 子 系统 和 系统 时 对 软件 进 
行 确认 。 每 个 测试 步骤 都 是 通过 有 助 于 测试 用 例 设 计 的 一 系列 系统 化 测试 技术 来 完 
成 的 。 

软件 测试 策略 由 项 目 经 理 、 软 件 工 程 师 及 测试 专家 来 制定 。 测 试 所 花费 的 工作 量 经 
常 比 其 他 任何 软件 工程 活动 都 多 。 软 件 测试 策略 提供 了 一 张 路 线 图 : 描述 将 要 进行 的 测 
试 步 又, 这些 步 又 计 划 和 执行 的 时 机 以 及 需要 的 工作 量 . 时 间 和 资源 。 因 此 ,任何 测试 策 
略 都 必须 包含 测试 计划 测试 用 例 设 计 、 测 试 执行 以 及 测试 结果 数据 的 收集 与 评估 。 

测试 从 “小 范围 "开始 ,并 逐步 过 渡 到 “软件 整体 "。 这 意味 着 ,早期 的 测试 关注 单个 构 
件 或 相关 的 一 小 组 构件 ,利用 测试 发 现 封装 在 构件 中 的 数据 错误 和 处 理 迎 辑 错误 。 当 完 
成 单个 构件 的 测试 后 ,需要 将 构件 集成 起 来 ,直到 建成 整个 系统 。 这 时 ,执行 一 系列 的 高 
阶 测试 (high-order test) 以 发 现 不 满足 顾客 需求 的 错误 。 随 着 错误 的 发 现 , 必 须 利 用 调试 
过 程 对 错误 进行 诊断 和 纠正 。 

测试 规格 说 明 是 将 软件 测试 团队 的 具体 测试 方法 文档 化 ,主要 包括 制定 描述 整体 策 
略 的 计划 ,定义 特定 测试 步骤 的 规程 及 将 要 进行 测试 的 类 型 。 

与 测试 不 同 的 是 ,调试 被 看 做 是 一 种 技术 。 从 问题 的 症状 显示 开始 ,调试 活动 要 去 追 
踪 错 误 的 原因 。 


4.1 软件 测试 的 策略 性 方法 


测试 是 可 以 事先 计划 并 可 以 系统 地 进行 的 一 系列 活动 。 因 此 ,应 该 为 软件 过 程 定义 
软件 测试 模板 ,即将 特定 的 测试 用 例 设 计 技术 和 测试 方法 放 到 一 系列 的 测试 步 又 中 去 。 

许多 软件 测试 策略 为 软件 开发 人 员 提 供 了 测试 模板 ,并 具备 下 述 一 般 特征 : 

。 为 完成 有 效 的 测试 ,应 该 进行 有 效 的 、 正 式 的 技术 评审 。 通 过 评审 ,许多 错误 可 以 

在 测试 开始 之 前 排除 。 

。 测 试 开 始 于 构件 层 , 然 后 向 外 “延伸 ”到 整个 基于 计算 机 系统 的 集成 。 

。 不同 的 测试 技术 适用 于 不 同 的 软件 工程 方法 和 不 同 的 时 间 点 。 

。 测 试 由 软件 开发 人 员 和 (对 大 型 项 目 而 言 ) 独 立 的 测试 组 执行 。 

。 测试 和 调试 是 不 同 的 活动 ,但 任何 测试 策略 都 必须 包括 调试 。 

软件 测试 策略 必须 提供 必要 的 低级 测试 ,可 以 验证 小 段 源 代 码 是 否 正确 实现 。 也 要 
提供 高 级 测试 , 用 来 确认 系统 的 主要 功能 是 否 满足 用 户 需求 。 软 件 测 试 策略 必须 为 专业 
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人 员 提 供 工 作 指南 ,同时 ,为 管理 者 提供 一 系列 的 里 程 碑 。 测 试 的 进度 必须 是 可 测量 的 ， 
并 且 应 该 让 问题 尽 可 能 早 地 暴露 。 


4.1.1 软件 测试 策略 一 一 宏观 


可 以 将 软件 过 程 看 做 如 图 4-1 所 示 的 螺旋 。 开 始 时 系统 工程 定义 软件 的 角色 ,从 而 
引出 软件 需求 分 析 ,在 需求 分 析 中 建立 了 软件 的 信息 域 、 功 能 ,行为 性能、 约束 和 确认 标 
准 。 沿 着 螺旋 向 内 ,经 过 设计 阶段 ,最 后 到 达 编 码 阶 段 。 为 开发 计算 机 软件 , 沿 着 流 线 螺 
旋 前 进 ( 顺 时 针 ) ,每 走 一 圈 都 会 降低 软件 的 抽象 层次 。 
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软件 测试 策略 也 可 以 放 在 螺旋 模型 中 来 考虑 。 单 元 测试 起 始 于 螺旋 的 旋涡 中 心 , 侧 
重 于 以 源 代 码 形式 实现 的 每 个 单元 (例如 ,构件 .类 或 Web 应 用 内 容 对 象 )。 沿 着 螺旋 向 
外 ,就 是 集成 测试 。 这 时 的 测试 重点 在 软件 体系 结构 的 设计 和 构造 。 沿 着 螺旋 向 外 再 走 
一 圈 , 就 是 确认 测试 ,在 这 个 阶段 ,依据 已 经 建立 的 软件 ,对 需求 (作为 软件 需求 建 模 的 一 
部 分 而 建立 ) 进 行 确认 。 最 后 到 达 系 统 测试 阶段 ,将 软件 与 系统 的 其 他 成 分 作为 一 个 整体 
来 测试 。 为 了 测试 计算 机 软件 ,以 顺 时针 方 向 沿 着 流 线 向 外 螺旋 前 进 , 每 转 一 圈 都 拓宽 了 
测试 范围 。 

以 过 程 的 观点 考虑 整个 测试 ,软件 工程 环境 中 的 测试 实际 上 就 是 按 顺序 实现 4 个 步 
又 ,如 图 4-2 所 示 。 最 初 ,测试 侧重 于 单个 构件 ,确保 它 起 到 了 单元 的 作用 ,因此 称 之 为 单 
元 测试 。 单 元 测试 充分 利用 测试 技术 ,运行 构件 中 每 个 控制 结构 的 特定 路 径 , 以 确保 路 径 
的 完全 车 盖 ,并 最 大 可 能 地 发 现 错误 。 接 下 来 ,组 装 或 集成 各 个 构件 以 形成 完整 的 软件 
包 。 集 成 测试 处 理 并 验证 与 程序 构造 相关 的 问题 。 在 集成 过 程 中 ,普遍 使 用 关注 输入 和 
输出 的 测试 用 例 设计 技术 (尽管 也 使 用 检验 特定 程序 路 径 的 测试 用 例 设计 技术 来 保证 主 
要 控制 路 径 的 覆盖 )。 在 软件 集成 (构造 ) 完 成 之 后 ,要 执行 一 系列 的 高 阶 测试 ,必须 评估 
确认 准则 (需求 分 析 阶 段 建立 的 )。 确 认 测 试 为 软件 满足 所 有 的 功能 行为 和 性 能 需求 提 
供 最 终 保证 。 

最 后 的 高 阶 测试 步骤 已 经 超出 软件 工程 的 边界 ,属于 更 为 广泛 的 计算 机 系统 工程 范 
围 。 软 件 一 旦 确认 ,就 必须 与 其 他 系统 成 分 (如 硬件 、 人 数据库 ) 结 合 在 一 起 。 系 统 测试 
验证 所 有 成 分 都 能 很 好 地 结合 在 一 起 , 且 能 满足 整个 系统 的 功能 或 性 能 需求 。 
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4-2 软件 测试 步骤 


4.1.2 测试 完成 的 标准 


每 当 讨论 软件 测试 时 ,都 会 引出 一 个 典型 问题 , 即 “ 测 试 什么 时 候 才 算 做 完 ?” 实 际 上 
这 个 问题 没有 确定 的 答案 ,只 有 一 些 相关 的 经 验 指导 。 因 为 "永远 也 不 能 完成 测试 ”测试 
这 个 担子 只 会 从 软件 工程 师 身上 转移 到 最 终 用 户 身上 。 用 户 每 次 运行 计算 机 程序 时 , 程 
序 就 在 经 受 测试 。 当 然 , 另 一 个 答案 是 : 当 你 的 时 间或 资金 耗 尽 时 ,测试 就 完成 了 。 

通过 在 软件 测试 过 程 中 收集 度量 数据 并 利用 现 有 的 软件 可 靠 性 模型 ,对 回答 “测试 何 
时 做 完 ” 这 种 问题 ,提出 有 意义 的 指导 性 原则 是 可 能 的 。 


4.2 策略 问题 


尽管 测试 的 主要 目的 是 查找 错误 ,但 是 一 个 好 的 测试 策略 也 可 以 用 来 评估 软件 的 其 
他 质量 特性 ,例如 可 移植 性 、 可 维护 性 和 易 用 性 等 。 这 些 都 应 该 以 可 测量 的 方式 加 以 规 
定 , 从 而 保证 测试 结果 无 歧义 性 。 

明确 地 陈述 测试 目标 。 测 试 的 特定 目标 应 该 用 可 测量 的 术语 进行 陈述 。 例 如 ,测试 
的 有 效 性 测试 的 覆盖 率 ,平均 故障 时 间 发现 和 修正 缺陷 的 成 本 、 剩 余 缺 陷 的 密度 或 出 现 
频率 测试 的 工作 时 间 ,这 些 都 应 当 在 测试 计划 中 陈述 。 

了 解 软件 的 用 户 并 为 每 类 用 户 建立 用 户 描述 。 描 述 每 类 用 户 交 互 场景 的 用 例 ,侧重 
于 测试 产品 的 实际 使 用 ,可 以 减少 整个 测试 的 工作 量 。 

制定 强调 “快速 周期 测试 "的 测试 计划 。Gilb 建议 软件 工程 团队 * 对 客户 有 用 的 至 少 
是 可 作 检 查 的 功能 增 量 和 (或 ) 质 量 改进 ,学 会 以 快速 周期 (2%% 的 项 目 工 作 量 ) 进 行 测试 ”。 
从 这 些 快速 周期 测试 中 得 到 的 反馈 可 用 于 控制 质量 的 等 级 和 相应 的 测试 策略 。 

建立 能 够 测试 自身 的 “健壮 ”软件 。 软 件 应 该 利用 防 错 技 术 进 行 设计 。 也 就 是 说 , 软 
件 应 该 能 够 诊断 某 些 类 型 的 错误 。 另 外 ,软件 设计 应 该 包括 自动 化 测试 和 回归 测试 。 

测试 之 前 ,利用 有 效 的 正式 技术 评审 作为 过 滤器 。 在 发 现 错误 方面 ,正式 技术 评审 与 
测试 一 样 有 效 。 因 此 ,评审 可 以 减少 生产 高 质量 软件 所 需 的 测试 工作 量 。 

实施 正式 技术 评审 以 评估 测试 策略 和 测试 用 例 本 身 。 正 式 技术 评审 能 够 发 现 测试 方 
法 中 的 不 一 致 .遗漏 和 明显 的 错误 。 这 节省 了 时 间 ,也 提高 了 产品 质量 。 为 测试 过 程 建立 
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一 种 持续 的 改进 方法 。 测 试 策 略 应 该 是 可 以 测量 的 。 测 试 过 程 中 收集 的 度量 数据 应 当 作 
为 软件 测试 的 统计 过 程控 制 方法 的 一 部 分 。 


4.3 ”传统 软件 的 测试 策略 


所 谓 传统 软件 ,其 体系 结构 不 是 面向 对 象 的 ,也 不 包括 Web 应 用 。 有 许多 策略 可 用 
于 测试 软件 。 其 中 一 个 极端 是 ,软件 团队 等 到 系统 完全 建成 后 对 整个 系统 执行 测试 ,以 期 
望 发 现 错误 。 虽 然 这 种 方法 很 有 吸引 力 , 但 效果 不 好 ,可 能 得 到 的 是 有 许多 缺陷 的 软件 ， 
致使 所 有 的 干系 人 感到 失望 。 另 一 个 极端 是 ,无 论 系 统 任何 一 部 分 何 时 建成 ,软件 工程 师 
每 天 都 在 进行 测试 。 尽 管 这 种 方法 对 很 多 人 都 缺少 吸引 力 ,但 确实 很 有 效 。 遗 憾 的 是 , 许 
多 软件 开发 者 对 使 用 后 一 种 方法 感到 犹 殉 。 多 数 软件 团队 选择 介 于 这 两 者 之 间 的 测试 策 
略 。 这 种 策略 以 渐进 的 观点 对 待 测试 ,以 个 别 程序 单元 的 测试 为 起 点 ,逐步 转移 到 方便 于 
单元 集成 的 测试 ,最 后 以 实施 整个 系统 的 测试 而 告终 。 


4.3.1 单元 测试 策略 


单元 测试 侧重 于 软件 设计 的 最 小 单元 (软件 构件 或 模块 ) 的 内 部 处 理 逻 辑 和 数据 结 
构 , 利 用 构件 级 设计 描述 作为 指南 ,测试 重要 的 控制 路 径 以 发 现 模块 内 的 错误 。 测 试 的 相 
对 复杂 度 和 这 类 测试 发 现 的 错误 受到 单元 测试 约束 范围 的 限制 ,测试 可 以 对 多 个 构件 并 
行 执行 。 

图 4-3 概要 描述 了 单元 测试 。 测 试 模块 的 接口 是 
为 了 保证 被 测 程序 单元 的 信息 能 够 正常 地 流入 和 流 


出 ;检查 局 部 数据 结构 以 确保 临时 存储 的 数据 在 算法 接 
的 整个 执行 过 程 中 能 维持 其 完整 性 ;执行 控制 结构 中 np 
的 所 有 独立 路 径 (基本 路 径 ) 以 确保 模块 中 的 所 有 语句 人 
至 少 执行 一 次 ;测试 边界 条 件 确保 模块 在 到 达 边界 值 
的 极限 或 受 限 处 理 的 情形 下 仍 能 正确 执行 。 最 后 ,要 
对 所 有 的 错误 处 理 路 径 进行 测试 。 

对 穿越 模块 接口 的 数据 流 的 测试 要 在 任何 其 他 测 
试 开始 之 前 进行 ,因为 数据 车 不 能 正确 地 输入 输出 ,其 测 汪 用例 

| 


他 测试 都 是 没有 意义 的 。 另 外 ,应 当 测 试 局 部 数据 结 
构 , 可 能 的 话 ,在 单元 测试 期 间 确定 对 全 局 数据 的 局 部 
影响 。 

在 单元 测试 期 间 ,选择 测试 的 执行 路 径 是 最 基本 的 任务 。 设 计 测试 用 例 是 为 了 发 现 
因 错 误 计 算 、 不 正确 的 比较 或 不 适当 的 控制 流 而 引起 的 错误 。 

边界 测试 是 最 重要 的 单元 测试 任务 之 一 。 软 件 通 常 在 边界 处 出 错 ,也 就 是 说 ,错误 行 
为 往往 出 现在 处 理 n 维 数组 的 第 个 元 素 , 或 者 i 次 循环 的 第 i 次 调用 ,或 者 遇 到 允许 出 
现 的 最 大 、 最 小 数值 时 。 使 用 刚好 小 于 、 等 于 或 大 于 最 大 值 和 最 小 值 的 数据 结构 、 控 制 流 


4-3 单元 测试 概述 
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和 数值 作为 测试 用 例 就 很 有 可 能 发 现 错误 。 

好 的 设计 要 求 能 够 预 置 出 错 条 件 并 设置 异常 处 理 路 径 , 以 便当 错误 确实 出 现时 重新 
确定 路 径 或 彻底 中 断 处 理 , 即 所 谓 的 防 错 技术 。 当 评估 异常 处 理 时 ,应 能 测试 下 述 的 潜在 
错误 : 错误 描述 难以 理解 ; 四 记录 的 错误 与 真正 遇 到 的 错误 不 一 致 ; 回 在 异常 处 理 之 
前 ,错误 条 件 就 引起 了 操作 系统 的 干预 ; @ 异 常 条 件 处 理 不 正确 ; @ 错 误 描述 没有 提供 
足够 的 信息 ,对 确定 错误 产生 原因 没有 帮助 。 

设计 高 内 聚 的 构件 可 以 简化 单元 测试 。 当 构件 只 强调 一 个 功能 时 ,测试 用 例 数 就 会 
降低 , 且 比 较 容易 预见 错误 和 发 现 错误 。 


4.3.2 集成 测试 策略 


如 果 每 个 模块 都 能 单独 工作 得 很 好 ,那么 为 什么 要 怀疑 将 它们 放 在 一 起 时 的 工作 情 
况 呢 ? 当然 ,这 个 问题 涉及 “将 它们 放 在 一 起 ”的 接口 相连 。 数 据 可 能 在 穿 过 接口 时 丢失 ; 
一 个 模块 可 能 对 另 一 个 模块 产生 负面 影响 ; 子 功能 联合 在 一 起 并 不 能 达到 预期 的 功能 ; 单 
个 模块 中 可 以 接受 的 不 精确 性 在 连接 起 来 之 后 可 能 会 扩大 到 无 法 接受 的 程度 .全 局 数据 
结构 可 能 产生 问题 。 遗 憾 的 是 ,问题 还 远 不 止 这 些 。 

集成 测试 是 构造 软件 体系 结构 的 系统 化 技术 ,同时 也 是 进行 一 些 旨 在 发 现 与 接口 相 
关 的 错误 的 测试 。 其 目标 是 利用 已 通过 单元 测试 的 构件 建立 设计 中 描述 的 程序 结构 。 

常常 存在 一 种 非 增 基 集成 的 倾向 , 即 利用 “一 步 到 位 ”的 方式 来 构造 程序 。 所 有 的 构 
件 都 事先 连接 在 一 起 ,全 部 程序 作为 一 个 整体 进行 测试 ,其 结果 往往 是 一 片 混乱 ,会 出 现 
一 大 堆 错误 。 由 于 在 整个 程序 的 广阔 区 域 中 分 离 出 错 的 原因 非常 复杂 ,因此 ,改正 错误 比 
较 困难 。 一 旦 改正 了 这 些 错误 ,可 能 又 会 出 现 新 的 错误 。 这 个 过 程 似乎 会 以 无 限 循环 的 
方式 继续 下 去 。 

增 量 集成 与 "一 步 到 位 ”的 集成 方法 相反 。 程 序 以 小 增 量 的 方式 逐步 进行 构造 和 测 
试 ,这 样 错 误 易于 分 离 和 纠正 ,更 易于 对 接口 进行 彻底 测试 ,而 且 可 以 运用 系统 化 的 测试 
方法 。 

自 项 向 下 集成 。 这 是 一 种 构造 软件 体系 结构 的 增 量 测试 方法 。 模 块 的 集成 顺序 为 从 
主 控 模块 ( 主 程序 ) 开 始 , 沿 着 控制 层次 逐步 向 下 ,以 深度 优先 或 广度 优先 的 方式 将 从 属于 
(和 间接 从 属于 ) 主 控 模块 的 模块 集成 到 结构 中 去 。 

参见 图 4-4, 深 度 优先 集成 是 首先 集成 位 于 程序 结构 中 主 控 路 径 上 的 所 有 构件 。 主 
控 路 径 的 选择 有 一 点 武断 ,也 可 以 根据 特定 应 用 系统 的 特征 进行 选择 。 例 如 ,选择 最 左边 
的 路 径 , 首 先 集成 构件 Mi .Ms 和 Ms 。 其 次 ,集成 Ms .Ms ( 若 M: 的 正常 运行 是 必需 的 )， 
然后 集成 中 间 和 右边 控制 路 径 上 的 构件 。 广 度 优先 集成 首先 沿 着 水 平方 向 ,将 属于 同一 
层 的 构件 集成 起 来 。 如 图 4-5 中 ,首先 将 构件 M; 、M; 和 M, 集 成 起 来 ,其 次 是 下 一 个 控制 
层 Ms .Ms , 依 此 类 推 。 

集成 过 程 可 以 通过 下 列 5 个 步骤 完成 : 

(1) 主 控 模 块 用 做 测试 驱动 模块 ,用 直接 从 属于 主 控 模块 的 所 有 模块 代替 桩 模块 ; 

(2) 依靠 所 选择 的 集成 方法 ( 即 深度 优先 或 广度 优先 ) , 每 次 用 实际 模块 替换 一 个 从 
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(3) 集成 每 个 模块 后 都 进行 测试 ; 

(4) 在 完成 每 个 测试 集 之 后 ,用 实际 模块 蔡 换 另 一 个 桩 模块 ; 

(5) 可 以 执行 回归 测试 (在 本 节 的 后 面 讨论 ) 以 确保 没有 引入 新 的 错误 。 

回 到 第 2 步 继 续 执行 此 过 程 , 直 到 完成 整个 程序 结构 的 构造 。 

自 顶 向 下 集成 策略 是 在 测试 过 程 的 早期 验证 主要 控制 点 或 决策 点 。 在 能 够 很 好 分 解 
的 程序 结构 中 ,决策 发 生 在 层次 结构 的 较 高 层 , 因 此 首先 要 遇 到 。 如 果 主 控 问题 确实 存 
在 ,尽早 地 发 现 是 有 必要 的 。 若 选择 了 深度 优先 集成 方法 ,可 以 实现 和 展示 软件 的 某 个 完 
整 功能 。 较 早 的 功能 展示 可 以 增强 开发 者 .投资 者 及 用 户 的 信心 。 

自 顶 向 下 的 集成 策略 相对 来 说 似乎 并 不 复杂 ,而 实际 上 可 能 出 现 逻 辑 上 的 问题 。 最 
普遍 的 问题 出 现在 处 理 较 低层 次 时 会 要 求 对 较 高 层 进行 了 充分 测试 。 在 自 顶 向 下 测试 开 
始 时 , 桩 模块 代替 低层 次 的 模块 ,因此 ,没有 重要 的 数据 在 程序 结构 中 向 上 传递 。 测 试 者 
只 有 三 种 选择 : 四 许多 测试 延迟 到 用 实际 模块 替换 桩 模块 之 后 ; 四 模拟 实际 模块 ,开发 
实现 有 限 功能 的 桩 模块 ; @ 利 用 自 底 向 上 的 方式 集成 软件 。 

第 一 种 方法 使 我 们 对 特定 测试 与 特定 模块 集成 之 间 的 相关 性 方法 失去 某 些 控制 。 这 
不 仅 会 为 确定 错误 产生 原因 带 来 一 定 的 困难 ,而 且 会 违背 自 顶 向 下 方法 高 度 受 限 的 本 质 
特征 。 第 二 种 方法 虽然 可 行 ,但 随 着 桩 模块 越 来 越 复杂 ,可 能 会 产生 很 大 的 额外 开销 。 

自 底 向 上 集成 测试 。 顾 名 思 义 ,就 是 从 原子 模块 (程序 结构 的 最 底层 构件 ) 开 始 进行 
构造 和 测试 。 由 于 构件 是 自 底 向 上 集成 的 ,在 处 理 时 所 需要 的 从 属于 给 定 层次 的 模块 总 
是 存在 的 ,因此 ,没有 必要 使 用 桩 模块 。 实 现 步 又 如 下 : 

(1) 连接 低层 构件 以 构成 完成 特定 子 功能 的 簇 ( 有 时 称 之 为 build) ; 

(2) 编写 驱动 模块 (测试 的 控制 程序 ) 以 协调 测试 用 例 的 输入 和 输出 ; 

(3) 测试 簇 ; 

(4) 去 掉 驱 动 程序 , 沿 着 程序 结构 向 上 逐步 连接 簇 。 

遵循 这 种 模式 的 集成 如 图 4-5 所 示 。 连 接 相 应 的 构件 形成 徐 1、 簇 2 和 簇 3, 利 用 驱 
动 模块 (图 中 的 虚线 框 ) 对 每 个 簇 进行 测试 。 簇 1 和 簇 2 中 的 构件 从 属于 模块 M, ,去 掉 驱 
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动 模块 D, 和 D。 ,将 这 两 个 簇 直 接 与 M, 相 连 。 与 之 相 类 似 , 在 簇 3 与 Me 连接 之 前 去 掉 驱 
动 模块 D, 。 最 后 将 M, 和 Me 与 构件 M. 连 接 在 一 起 , 依 此 类 推 。 

随 着 集成 向 上 进行 ,对 单独 的 测试 驱动 模块 的 需求 减少 。 事实 上 ,车 程序 结构 的 最 上 
两 层 是 自 项 向 下 集成 的 ,驱动 模块 的 数量 可 以 大 大 减少 ,而 且 簇 的 集成 得 到 明显 简化 。 

有 关 自 顶 向 下 和 自 底 向 上 测试 策略 的 优 缺 点 有 许多 讨论 。 一 般 来 讲 , 一 种 策略 的 优 
点 可 能 就 是 另 一 种 策略 的 缺点 。 自 顶 向 下 方法 的 主要 缺点 是 需要 桩 以 及 桩 所 带 来 的 测试 
难题 ,这 一 问题 通常 可 以 通过 较 早 地 测试 主要 控制 功能 这 一 优点 来 弥补 。 自 底 向 上 测试 
方法 的 主要 缺点 在 于 : 直到 加 入 最 后 一 个 模块 ,程序 才 作为 一 个 实体 存在 。 这 个 缺点 则 
因 测试 用 例 设 计 比 较 容易 和 无 需 桩 模块 而 得 到 补偿 。 


4.3.3” 冒 烟 测试 策略 


当 开 发 软件 产品 时 , 骨 烟 测试 是 一 种 常用 的 滚动 集成 测试 方法 。 每 天 对 软件 进行 重 
构 ( 加 入 新 的 构件 ) 并 进行 冒 烟 测试 。 冒 烟 测试 是 时 间 关 键 项 目的 决定 性 机 制 , 它 让 软件 
团队 频繁 地 对 项 目 进 行 评估 。 本 质 上 ,家 烟 测 试 方法 包括 下 列 活动 : 

(1) 将 已 经 转换 为 代码 的 软件 构件 集成 到 构建 (build) 中 。 一 个 构建 包括 所 有 的 数据 
文件 、 库 可 复 用 的 模块 以 及 实现 一 个 或 多 个 产品 功能 所 需 的 工程 化 构件 ; 

(2) 设计 一 系列 测试 以 暴露 影响 构件 正确 地 完成 其 功能 的 错误 。 其 目的 是 为 了 发 现 
极 有 可 能 造成 项 目 延 迟 的 业务 阻塞 错误 ; 

(3) 每 天 将 该 构件 与 其 他 构件 及 整个 软件 产品 (以 其 当前 的 形式 ) 集 成 起 来 进行 冒 烟 
测试 。 这 种 集成 方法 可 以 是 自 顶 向 下 ,也 可 以 自 底 向 上 。 

每 天 对 整个 产品 进行 测试 可 能 使 一 些 读者 感到 奇怪 。 然 而 ,频繁 的 测试 让 管理 者 和 
专业 人 员 都 能 够 对 集成 测试 的 进展 做 出 实际 的 评估 。MecConnell 是 这 样 描述 冒 烟 测试 
的 :“ 冒 烟 测试 应 该 对 整个 系统 进行 彻底 的 测试 。 它 不 一 定 是 穷 举 的 ,但 应 能 暴露 主要 问 
题 。 冒 烟 测 试 应 该 足够 彻底 ,以 使 得 若 构造 通过 测试 , 则 可 以 假定 它 足 够 稳定 以 致 能 经 受 
更 彻底 的 测试 。 

当 应 用 于 复杂 的 、 时 间 关 键 的 软件 工程 项 目 时 , 骨 烟 测试 有 下 列 好 处 : 

。 降低 了 集成 风险 。 由 于 冒 烟 测 试 是 每 天 进行 的 ,能 较 早 地 发 现 不 相 容 性 和 业务 阻 

塞 错误 ,从 而 降低 了 因 发 现 错误 而 对 项 目 进度 造成 严重 影响 的 可 能 性 。 

。 提高 最 终 产 品 的 质量 。 由 于 这 种 方法 是 面向 构建 (集成 ) 的 ,因此 , 冒 烟 方法 既 有 
可 能 发 现 功能 性 错误 ,也 有 可 能 发 现 体系 结构 和 构件 级 设计 错误 。 若 较 早 地 改正 
了 这 些 错误 ,产品 的 质量 就 会 更 好 。 

。 简化 错误 的 诊断 和 修正 。 与 所 有 的 集成 测试 方法 一 样 , 冒 烟 测试 期 间 所 发 现 的 错 
误 可 能 与 新 的 软件 增 量 , 即 刚 加 入 到 构件 中 的 软件 有 关 。 

。 易于 评估 进展 状况 。 随 着 时 间 的 推移 ,更 多 的 软件 被 集成 ,更 多 地 展示 出 软件 的 

工作 状况 。 这 就 提高 了 团队 的 士气 ,并 使 管理 者 对 项 目 进展 有 较 好 的 把 握 。 

集成 策略 的 选择 依赖 于 软件 的 特征 ,有 时 也 与 项 目的 进度 安排 有 关 。 一 般 来 讲 , 组 合 
方法 (有 时 称 之 为 三 明治 测试 方法 ), 即 ,用 自 项 向 下 方法 测试 程序 结构 的 较 高 层 ,用 自 底 
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向 上 方法 测试 其 从 属 层 , 可 能 是 最 好 的 折 中 。 

当 执 行 集成 测试 时 ,测试 人 员 应 能 标识 关键 模块 。 关 键 模块 具有 下 述 一 个 或 多 个 特 
征 : 涉及 几 项 软件 需求 ; 四 含有 高 层 控制 (位 于 程序 结构 的 较 高 层次 ); @ 复 杂 或 容易 
出 错 ; @ 具 有 明确 的 性 能 需求 。 关 键 模 块 应 尽 可 能 早 地 测试 。 


4.3.4 回归 测试 策略 


与 冒 烟 测 试 一 样 ,回归 测试 也 是 集成 测试 的 一 部 分 ,是 减少 “ 负 效 应 ”的 重要 方法 。 每 
次 对 软件 做 重要 变更 时 (包括 新 构件 的 集成 ) ,都 要 进行 回归 测试 。 每 当 加 入 一 个 新 模块 
作为 集成 测试 的 一 部 分 时 ,软件 发 生变 更 ,建立 了 新 的 数据 流 路 径 ,可 能 出 现 新 的 1/0, 以 
及 调用 新 的 控制 逻辑 。 这 些 变 更 可 能 会 使 原来 可 以 正常 工作 的 功能 产生 问题 。 在 集成 测 
试 策略 的 环境 下 ,回归 测试 是 重新 执行 已 测试 过 的 某 些 子 集 , 以 确保 变更 没有 传播 不 期 望 
的 副作用 。 

在 较 广 的 环境 中 ,( 任 何 种 类 的 ) 成 功 测试 都 能 发 现 错误 并 改正 错误 。 无 论 什 么 时 候 
修正 软件 ,软件 配置 的 某 些 方 面 ( 程 序 \ 文 档 或 支持 数据 ) 也 发 生变 更 。 回 归 测试 有 助 于 保 
证 变更 (由 于 测试 或 其 他 原因 ) 不 引入 无 意识 行为 或 额外 的 错误 。 

回归 测试 可 以 手工 进行 ,方法 是 重新 执行 所 有 测试 用 例 的 子 集 ,或 者 利用 捕 提 /回放 
工具 自动 进行 。 捕 提 / 回 放 工 具 使 软件 工程 师 能 够 为 后 续 的 回放 与 比较 捕 提 测试 用 例 和 
测试 结果 。 回 归 测 试 套件 (将 要 执行 的 测试 子 集 ) 包 含 以 下 三 种 测试 用 例 : 

。 能 够 测试 软件 所 有 功能 的 具有 代表 性 的 测试 样本 ; 

。 额外 测试 ,侧重 于 可 能 会 受 变 更 影响 的 软件 功能 ; 

。 侧重 于 已 发 生变 更 的 软件 构件 测试 。 

随 着 集成 测试 的 进行 ,回归 测试 的 数量 可 能 变 得 相当 庞大 ,因此 ,应 将 回归 测试 套件 
设计 成 只 包括 涉及 每 个 主要 程序 功能 的 一 个 或 多 个 错误 类 的 测试 。 一 旦 发 生变 更 ,对 每 
个 软件 功能 重新 执行 所 有 的 测试 是 不 切实 际 的 ,而 且 效 率 很 低 。 


4.4 面向 对 象 软件 的 测试 策略 


简单 地 说 ,测试 的 目标 就 是 在 现实 的 时 间 范 围 内 利用 可 控 的 工作 量 找到 尽 可 能 多 的 
错误 。 对 于 面向 对 象 软件 ,尽管 这 个 基本 目标 是 不 变 的 ,但 面向 对 象 软件 的 本 质 特征 改变 
了 测试 策略 。 


4.4.1 面向 对 象 环 境 中 的 单元 测试 


当 考虑 面向 对 象 软件 时 ,单元 的 概念 发 生 了 变化 。 封 装 导 出 了 类 和 对 象 的 定义 。 这 
意味 着 每 个 类 和 类 的 实例 包装 有 属性 (数据 ) 和 处 理 这 些 数据 的 操作 。 封 装 的 类 通常 是 单 
元 测试 的 重点 ,然而 ,类 中 包含 的 操作 (方法 ) 是 最 小 的 可 测试 单元 。 由 于 类 中 可 以 包含 很 
多 不 同 的 操作 , 且 特 殊 的 操作 可 以 作为 不 同类 的 一 部 分 存在 ,因此 ,必须 改变 单元 测试 的 
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方法 。 

面向 对 象 软件 的 类 测试 与 传统 软件 的 模块 测试 相似 。 我 们 不 再 孤立 地 对 单个 操作 进 
行 测试 (传统 的 单元 测试 观点 ) ,而 是 将 其 作为 类 的 一 部 分 。 为 便于 说 明 , 考 虑 一 个 类 层次 
结构 ,在 此 结构 内 对 超 类 定义 某 操 作 X, 并 且 一 些 子 类 继承 了 操作 X。 每 个 子 类 使 用 操作 
X, 但 它 应 用 于 为 每 个 子 类 定义 的 私有 属性 和 操作 的 环境 内 。 由 于 操作 X 应 用 的 环境 有 
细微 的 差别 ,因此 有 必要 在 每 个 子 类 的 环境 中 测试 操作 X。 这 意味 着 在 面向 对 象 环 境 中 ， 
以 独立 的 方式 测试 操作 X( 传 统 的 单元 测试 方法 ) 往 往 是 无 效 的 。 

面向 对 象 软件 的 类 测试 等 同 于 传统 软件 的 单元 测试 。 不 同 的 是 传统 软件 的 单元 测试 
侧重 于 模块 的 算法 细节 和 穿 过 模块 接口 的 数据 ,面向 对 象 软件 的 类 测试 是 由 封装 在 该 类 
中 的 操作 和 类 的 状态 行为 启动 。 


4.4.2 ”面向 对 象 环境 中 的 集成 测试 


由 于 面向 对 象 软件 没有 明显 的 层次 控制 结构 ,因此 ,传统 的 自 顶 向 下 和 自 底 向 上 集成 
策略 已 没有 太 大 意义 。 另 外 ,由 于 类 的 成 分 间 直 接 或 间接 的 相互 作用 ,每 次 将 一 个 操作 集 
成 到 类 中 (传统 的 增 量 集成 方法 ) 往 往 是 不 可 能 的 。 

面向 对 象 系统 的 集成 测试 有 两 种 不 同 的 策略 。 一 种 策略 是 基于 线程 的 测试 ,对 响应 
系统 的 一 个 输入 或 事件 所 需 的 一 组 类 进行 集成 。 线 程 是 对 一 个 输入 或 事件 做 出 反应 的 类 

合 , 每 个 线程 单独 地 集成 和 测试 。 应 用 回归 测试 以 确保 没有 产生 副作用 。 另 一 种 方法 
是 基于 使 用 的 测试 ,侧重 于 那些 不 与 其 他 类 进行 频繁 协作 的 类 ,通过 测试 很 少 使 用 服务 类 
(如 果 有 的 话 ) 的 那些 类 ( 称 之 为 独立 类 ) 开 始 构 造 系 统 。 独 立 类 测试 完 后 ,利用 独立 类 测 
试 下 一 层次 的 类 ( 称 之 为 依赖 类 )。 继 续 依 赖 类 的 测试 直到 完成 整个 系统 。 

当 进行 面向 对 象 系统 的 集成 测试 时 ,驱动 模块 和 桩 模块 的 使 用 也 发 生 了 变化 。 驱 动 
模块 可 用 于 低层 操作 的 测试 和 整 组 类 的 测试 。 驱 动 模块 也 可 用 于 代替 用 户 界面 ,以 便 在 
界面 实现 之 前 就 可 以 进行 系统 功能 的 测试 。 桩 模块 可 用 于 类 间 需 要 协作 但 其 中 的 一 个 或 
多 个 协作 类 还 未 完全 实现 的 情况 下 。 

簇 测试 (cluster testing) 是 面向 对 象 软件 集成 测试 中 的 一 个 步骤 。 这 里 ,借助 设计 试 
图 发 现 协作 错误 的 测试 用 例 来 测试 (通过 检查 CRC 和 对 象 -关系 模型 所 确定 的 ) 协 作 的 
类 簇 。 


4.5 WebApp 的 测试 策略 


WebApp 测试 策略 采用 所 有 软件 测试 的 基本 原理 ,并 使 用 面向 对 象 系统 所 使 用 的 策 
略 和 方法 ,包括 : 

(1) 对 WebApp 的 内 容 模型 进行 评审 ,以 发 现 错误 。 

(2) 对 接口 模型 进行 评审 ,保证 适合 所 有 的 用 例 。 

(3) 评审 WebApp 的 设计 模型 ,发 现 导航 错误 。 

(4) 测试 用 户 界面 ,发 现 表现 机 制 和 (或 ) 导 航 机 制 中 的 错误 。 
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(5) 对 每 个 功能 构件 进行 单元 测试 。 

(6) 对 贯穿 体系 结构 的 导航 进行 测试 。 

(7) 在 各 种 不 同 的 环境 配置 下 ,实现 WebApp, 并 测试 WebApp 对 每 一 种 配置 的 
兼容 性 。 
(8) 进行 安全 性 测试 ,试图 攻击 WebApp 或 其 所 处 环境 的 弱点 。 

(9) 进行 性 能 测试 。 

(10) 通过 可 监控 的 最 终 用 户 群 对 WebApp 进行 测试 ;对 他 们 与 系统 的 交互 结果 进行 
评估 ,包括 内 容 和 导航 错误 、 可 用 性 ,兼容 性 、WebApp 的 可 靠 性 及 性 能 。 

因为 很 多 WebApp 在 不 断 进化 ,所 以 WebApp 测试 是 Web 支持 人 员 所 从 事 的 一 项 
持续 活动 ,他 们 使 用 回归 测试 ,这 些 测 试 是 从 首次 开发 WebApp 时 所 开发 的 测试 中 导 
出 的 。 


4.6 确认 测试 策略 


与 所 有 其 他 测试 步骤 类 似 , 确 认 测 试 尽力 发 现 错误 ,但 是 它 侧 重 于 需求 级 的 错误 , 即 
那些 对 最 终 用 户 是 显而易见 的 错误 。 

确认 测试 始 于 集成 测试 的 结束 , 那 时 已 测试 完 单个 构件 ,软件 已 组 装 成 完整 的 软件 
包 , 且 接口 错误 已 被 发 现 和 改正 。 在 进行 确认 测试 或 系统 级 测试 时 ,传统 软件 、 面 向 对 象 
软件 及 WebApp 之 间 的 差别 已 经 消失 ,测试 便 集中 于 用 户 可 见 的 动作 和 用 户 可 识别 的 系 
统 输 出 。 

确认 可 用 几 种 方式 进行 定义 ,但 是 ,其 中 一 个 简单 的 定义 是 当 软 件 可 以 按照 客户 合理 
的 预期 方式 工作 时 ,确认 就 算 成 功 。 软 件 需 求 规格 说 明文 档 描述 了 所 有 用 户 可 见 的 软件 
属性 ,并 包含 确认 准则 部 分 ,这 个 确认 准则 部 分 就 形成 了 确认 测试 方法 的 基础 。 

软件 确认 是 通过 一 系列 表明 与 软件 需求 相符 合 的 测试 而 获得 的 。 测 试 计划 列 出 将 要 
执行 的 测试 类 ,测试 规程 定义 了 特定 的 测试 用 例 , 设 计 的 特定 测试 用 例 用 于 确保 满足 所 有 
的 功能 需求 ,具有 所 有 的 行为 特征 ,所 有 内 容 都 准确 无 误 且 正确 显示 ,达到 所 有 的 性 能 需 
求 ,文档 是 正确 的 .可 用 的 , 且 满 足 其 他 需求 (如 : 可 移植 性 .兼容 性 .错误 恢 复 和 可 维 
护 性 )。 

执行 每 个 确认 测试 用 例 之 后 ,存在 下 面 两 种 可 能 条 件 之 一 : 

(1) 功能 或 性 能 特征 符合 需求 规格 说 明 , 可 以 接受 ; 

(2) 发 现 了 与 规格 说 明 的 偏差 ,创建 缺陷 列表 。 在 项 目的 这 个 阶段 发 现 的 错误 或 偏 
差 很 难 在 预定 的 交付 期 之 前 得 到 改正 。 此 时 往往 必须 与 客户 进行 协商 ,确定 解决 缺陷 的 
方法 。 

确认 过 程 的 一 个 重要 成 分 是 配置 评审 。 评 审 的 目的 是 确保 所 有 的 软件 配置 元 素 已 正 
确 开发 .编目 , 且 具 有 改善 支持 活动 的 必要 细节 。 有 时 将 配置 评审 称 为 审核 (audit) 。 
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4.7 系统 测试 策略 


事实 上 ,软件 只 是 基于 计算 机 大 系统 的 一 部 分 。 最 终 ,软件 要 与 其 他 系统 成 分 (如 , 硬 
件 、 人 和 信息 ) 相 结合 ,并 执行 一 系列 集成 测试 和 确认 测试 。 软 件 设 计 和 测试 期 间 所 采取 
的 步骤 可 以 大 大 提高 在 大 系统 中 成 功 地 集成 软件 的 可 能 性 。 

一 个 传统 的 系统 测试 问题 是 “相互 指责 ”。 这 种 情况 出 现在 发 现 一 个 错误 时 ,每 个 系 
统 成 分 的 开发 人 员 都 因为 这 个 问题 抱怨 别人 。 其 实 不 应 该 陷 人 这 种 无 谓 的 争论 之 中 , 软 
件 工程 师 应 该 预见 潜在 的 接口 问题 ,以 及 @ 设 计 出 错 处 理 路 径 , 用 以 测试 来 自 系统 其 他 
成 分 的 所 有 信息 ; @ 在 软件 接口 处 执行 一 系列 模拟 不 良 数 据 或 其 他 潜在 错误 的 测试 ; 
@ 记 录 测试 结果 ,这 些 可 作为 “相互 指责 ”出 现时 的 “证 据 *; @ 参 与 系统 测试 的 计划 和 设 
计 , 以 保证 软件 得 到 充分 的 测试 。 

系统 测试 实际 上 是 对 整个 基于 计算 机 的 系统 进行 一 系列 不 同 考验 的 测试 。 虽然 每 个 
测试 都 有 不 同 的 目的 ,但 所 有 测试 都 是 为 了 验证 系统 成 分 已 正确 地 集成 在 一 起 且 完 成 了 
指派 的 功能 。 


4.8 操作 剖面 


软件 产品 的 可 靠 性 在 很 大 程度 上 取决 于 它 的 运行 条 件 以 及 用 户 对 它 的 使 用 情况 。 操 
作 齐 面 描述 了 用 户 对 软件 的 使 用 情况 ,通过 建立 软件 系统 的 操作 剖面 ,可 以 有 效 地 指导 软 
件 测试 工作 ,最 大 限度 地 提高 软件 的 可 靠 性 。 

所 谓 痢 面 ,是 指 一 组 具有 某 种 出 现 概率 且 相 互 独立 的 选择 。 例 如 , 若 A 选择 的 出 现 
概率 为 60% ,B 选择 的 出 现 概率 为 40%, 则 该 剖面 为 A: 0.6;B: 0.4。 剖 面 一 般 以 表格 形 
式 表示 。 

对 于 软件 的 运行 条 件 以 及 用 户 的 使 用 情况 ,通常 是 逐 层 分 级 用 剖面 来 描述 。 从 软件 
的 可 行 性 分 析 开始 到 软件 测试 阶段 ,依次 所 建立 的 剖面 为 顾客 剖面 .用户 剖面 、 系 统 方式 
剖面 、 功 能 谢 面 和 操作 剖面 ,它们 的 描述 程度 逐步 细 化 、 具 体 。 其 中 ,操作 前 面 是 在 软件 实 
现 和 软件 测试 阶段 建立 的 , 它 描述 了 各 种 类 型 的 运行 所 出 现 的 概率 ,而 各 种 运行 的 性 质 是 
由 其 输入 状态 决定 的 。 其 他 剖面 在 需求 分 析 之 前 建立 ,有 时 可 以 延续 到 详细 设计 阶段 , 它 
们 描述 了 运行 条 件 和 用 户 使 用 软件 的 基本 特征 ,是 建立 


操作 剖面 的 基础 。 
操作 剖面 是 由 系统 开发 人 员 、 系 统 测试 人 员 和 软 

件 使 用 人 员 共 同 建立 的 ,需要 进行 广泛 的 调查 研究 ， 

这 种 调查 主要 以 使 用 人 员 具 有 良好 的 业务 知识 为 前 


提 。 操 作 剖 面 的 建立 可 与 软件 开发 同步 进行 ,也 可 单 

独 进行 ,但 是 不 受 软件 开发 方法 和 技术 的 影响 ,如 

图 4-6 所 示 。 测试 选择 
功能 前 面 在 设计 开始 前 建立 ,操作 剖面 在 测试 之 前 。 图 4.6 操作 剖面 的 开发 过 程 
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建立 ,所 以 它们 可 在 系统 设计 、 系 统 实现 、 单 元 测试 、 子 系统 测试 以 及 系统 维护 期 间 , 有 效 
地 指导 资源 分 配 、 人 力 安排 及 测试 工作 ,从 而 提高 软件 的 生产 率 和 可 靠 性 。 通 常 ,开发 和 
应 用 操作 剖面 所 获得 的 效益 是 所 花费 代价 的 10 倍 以 上 ,软件 项 目的 规模 越 大 ,建立 操作 
剖面 所 花费 的 开销 就 越 大 ,但 是 ,这 种 增长 明显 小 于 项 目 规模 的 增长 。 


4.9 调试 技巧 


软件 测试 是 一 种 能 够 系统 地 加 以 计划 和 说 明 的 过 程 ,可 以 进行 测试 用 例 设计 ,定义 测 
试 策 略 ,根据 预期 的 结果 评估 测试 结果 。 

调试 (debug) 出 现在 成 功 的 测试 之 后 。 也 就 是 说 , 当 测 试用 例 发 现 错误 时 ,调试 是 使 
错误 消除 的 过 程 。 尽 管 调试 可 以 是 ,也 应 该 是 一 个 有 序 的 过 程 ,但 它 仍 然 需 要 很 多 技巧 。 
当 评 估 测 试 结果 时 ,软件 工程 师 经 常 面 对 软件 问题 表现 出 的 “症状 ”, 即 ,错误 的 外 部 表现 
与 其 内 在 原因 没有 明显 的 关系 。 调 试 就 是 查找 问题 症状 与 其 产生 原因 之 间 的 联系 尚未 得 
到 很 好 理解 的 智力 过 程 。 


4.9.1 调试 过 程 


调试 并 不 是 测试 ,但 总 是 发 生 在 测试 之 后 (不 仅 包 括 软 件 发 布 之 前 开发 人 员 的 测试 ， 
也 包括 用 户 每 次 使 用 软件 时 对 软件 的 测试 )。 执 行 测试 用 例 , 对 测试 结果 进行 评估 ,而 且 
期 望 的 表现 与 实际 表现 不 一 致 时 ,调试 过 程 就 开始 了 。 在 很 多 情况 下 ,这 种 不 一 致 的 数据 
是 隐藏 在 背后 的 某 种 原因 所 表现 出 来 的 症状 。 调 试 试图 找到 隐藏 在 症状 背后 的 原因 ,从 
而 使 错误 得 到 修正 。 

调试 过 程 通常 得 到 以 下 两 种 结果 之 一 : 四 发 现 问题 的 原因 并 将 其 改正 ; 四 未 能 找到 
问题 的 原因 。 在 后 一 种 情况 下 ,调试 人 员 可 以 假设 一 个 原因 ,设计 一 个 或 多 个 测试 用 例 来 
帮助 验证 这 个 假设 ,重复 此 过 程 直到 改正 错误 。 

软件 Bug 的 以 下 特征 为 我 们 提供 了 一 些 调试 的 线索 : 

(1) 症状 与 原因 出 现 的 地 方 可 能 相隔 很 远 。 也 就 是 说 ,症状 可 能 在 程序 的 一 个 地 方 
出 现 , 而 原因 实际 上 可 能 在 很 远 的 另 一 个 地 方 。 高 度 耦 合 的 构件 加 剧 了 这 种 情况 的 发 生 。 

(2) 症状 可 能 在 另 一 个 错误 被 改正 时 (和 暂时) 消失 。 

(3) 症状 实际 上 可 能 是 由 非 错误 因素 (例如 , 舍 和 误差) 引起 的 。 

(4) 症状 可 能 是 由 不 易 追 踪 的 人 为 错误 引起 的 。 

(5) 症状 可 能 是 由 计时 问题 而 不 是 处 理 问题 引起 的 。 

(6) 重新 产生 完全 一 样 的 输入 条 件 是 困难 的 (如 : 输入 顺序 不 确定 的 实时 应 用 
系统 ) 。 

(7) 症状 可 能 时 有 时 无 ,这 在 软 硬 件 耦合 的 嵌入 式 系统 中 尤为 常见 。 

(8) 症状 可 能 是 由 分 布 运行 在 不 同 处 理 器 上 的 很 多 任务 引起 的 。 

在 调试 过 程 中 ,我 们 遇 到 错误 的 范围 从 恼人 的 小 错误 (如 不 正确 的 输出 格式 ) 到 灾难 
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性 故障 (如 系统 失效 ,造成 严重 的 经 济 或 物质 损失 )。 错 误 越 严重 ,查找 错误 原因 的 压力 也 
就 越 大 。 通 常情 况 下 ,这 种 压力 会 使 软件 开发 人 员 在 修改 一 个 错误 的 同时 引入 两 个 甚至 
更 多 的 错误 。 


4.9.2 心理 因素 


有 证 据 表 明 ,调试 本 领 属 于 一 种 个 人 天 赋 。 一 些 人 精 于 此 道 ,而 另 一 些 人 则 不 行 。 尽 
管 有 关 调 试 的 实验 证 据 可 以 有 多 种 解释 ,但 对 于 具有 相同 教育 和 经 验 背 景 的 程序 员 来 说 ， 
他 们 的 调试 能 力 是 有 很 大 差别 的 。Shneiderman 对 调试 的 人 为 因素 评论 如 下 :“ 调 试 是 
编程 过 程 中 比较 容易 让 人 感到 受挫 的 工作 之 一 。 它 包含 解决 问题 或 智力 测验 的 成 分 ,加 
之 不 情愿 承认 自己 犯 的 错误 、 焦 虑 和 不 情愿 接受 错误 存在 的 可 能 性 等 原因 加 剧 了 调试 任 
务 的 难度 。 幸 运 的 是 , 当 Bug 最 终 被 修改 时 ,调试 人 员 松 了 一 口气 。” 


4.9.3 调试 策略 


不 论 使 用 什么 方法 ,调试 有 一 个 基本 目标 , 即 : 查找 造成 软件 错误 或 缺陷 的 原因 并 改 
正 。 通 过 系统 评估 ,直觉 和 运气 相 结合 可 以 实现 这 个 目标 。 调 试 的 基础 是 利用 二 分 法 , 通 
过 有 效 假设 一 一 该 假设 预测 被 检查 的 新 值 一 一 定位 问题 的 来 源 。 

以 一 个 简单 的 非 软 件 问题 为 例 : 房间 里 的 一 元 台灯 不 亮 了 , 若 整个 房间 其 他 电器 也 
不 能 工作 , 则 一 定 是 总 闸 或 外 边 的 线路 坏 了 ,我 出 去 看 邻居 家 是 否 也 是 黑 的 , 若 不 是 ,我 就 
把 台灯 插 到 另 一 个 好 的 插座 里 试 试 ,或 把 别 的 电器 插 到 台灯 的 插座 里 检查 一 下 。 假 设 与 
测试 就 这 样 交 蔡 进行 。 

总 的 来 说 ,有 3 种 调试 方法 : 中 蛮 干 法 ; @ 回 溯 法 ; 加 原因 排除 法 。 这 3 种 调试 方法 
都 可 以 手工 执行 ,但 现代 的 调试 工具 可 以 使 调试 过 程 更 有 效 。 

蛮 干 法 可 能 是 分 离 软 件 错误 原因 最 常用 但 最 低 效 的 方法 。 在 所 有 其 他 方法 都 失败 的 
情况 下 ,我 们 才 使 用 这 种 方法 。 利 用 “让 计算 机 自己 找 错误 ”的 思想 ,进行 内 存 转 储 ,激活 
运行 时 跟踪 ,以 及 在 程序 中 加 载 大 量 的 输出 语句 。 和 希望 在 所 产生 的 大 量 信息 里 可 以 找到 
错误 原因 的 线索 。 尽 管 产生 的 大 量 信息 可 能 最 终 获 得 成 功 ,但 更 多 的 情况 下 ,这样 做 只 是 
浪费 精力 和 时 间 。 首 先 必 须 进 行 思 考 ! 

回溯 法 是 比较 常用 的 调试 方法 ,可 以 成 功 地 应 用 于 小 程序 中 。 从 发 现 症状 的 地 方 开 
始 ,向 后 追踪 (手工 ) 源 代码 ,直到 发 现 错误 的 原因 。 但 是 , 随 着 源 代 码 行 数 的 增加 ,潜在 的 
回溯 路 径 的 数量 可 能 会 变 得 难以 控制 。 

第 3 种 调试 方法 一 一 原因 排除 法 一 一 是 通过 演绎 或 归纳 并 引入 二 分 法 的 概念 来 实 
现 。 对 与 错误 出 现 相关 的 数据 加 以 组 织 , 以 分 离 出 潜在 的 错误 原因 。 假 设 一 个 错误 原因 ， 
利用 前 面 提 到 的 数据 证 明 或 反对 这 个 假设 。 或 者 先 列 出 所 有 可 能 的 错误 原因 ,再 执行 测 
试 逐个 进行 排除 。 若 最 初 的 测试 显示 出 某 个 原因 假设 可 能 成 立 的 话 , 则 要 对 数据 进行 细 
化 以 定位 错误 ,自动 调试 。 以 上 调试 方法 都 可 以 使 用 辅助 调试 工具 。 当 尝试 调试 策略 时 ， 
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调试 工具 为 软件 工程 师 提 供 半自动 化 的 支持 。Hailpern 与 Santhanam 总 结 这 些 工具 的 
状况 时 写 道 : “已 提出 许多 新 的 调试 方法 ,而 且 许 多 商业 调试 环境 也 已 经 具备 。 集 成 开发 
环境 (IDE) 提 供 了 一 种 方法 ,无 需 编 译 就 可 以 捕捉 特定 语言 的 预 置 错误 (例如 ,语句 结束 
符 的 丢失 、 变 量 未 定义 ,等 )。? 可 用 的 工具 包括 各 种 调试 编译 器 、 动 态 调试 辅助 工具 (“ 跟 踪 
工具 ”) 测试 用 例 自动 生成 器 和 交互 引用 映射 工具 。 然 而 ,工具 不 能 替代 基于 完整 设计 模 
型 和 清晰 源 代码 的 仔细 评估 。 

调试 的 最 终 和 能 言 应 该 是 :“ 若 所 有 的 方法 都 失败 了 ,就 该 寻求 帮助 1” 


4.9.4 纠正 错误 


一 旦 找到 错误 ,就 必须 纠正 。 但 是 ,我 们 已 提 到 过 ,修改 一 个 错误 可 能 会 引入 其 他 错 
误 , 因 此 ,不 当 修改 造成 的 危害 会 超过 带 来 的 益处 。Van Vleck 提出 ,在 进行 消除 错误 原 
因 的 “修改 ”之 前 ,每 个 软件 工程 师 应 该 问 以 下 3 个 问题 : 

(1) 这 个 错误 的 原因 在 程序 的 另 一 部 分 也 产生 过 吗 ? 在 多 数 情况 下 ,程序 的 错误 是 
由 错误 的 逻辑 模式 引起 的 ,这 种 逻辑 模式 可 能 会 在 别 的 地 方 出 现 。 仔 细 考 虑 这 种 逻辑 模 
式 可 能 有 助 于 发 现 其 他 错误 。 

(2) 进行 修改 可 能 引发 的 “下 一 个 错误 "是 什么 ? 在 改正 错误 之 前 ,应 该 仔细 考虑 源 
代码 (最 好 包括 设计 ) 以 评估 逻辑 与 数据 结构 之 间 的 耦合 。 若 要 修改 高 度 耦 合 的 程序 段 ， 
则 应 格外 小 心 。 

(3) 为 避免 这 个 错误 ,我 们 首先 应 当做 什么 呢 ? 这 个 问题 是 建立 统计 软件 质量 保证 
方法 的 第 一 步 。 若 我 们 不 仅 修 改 了 过 程 ,还 修改 了 产品 , 则 不 仅 可 以 排除 现在 的 程序 错 
误 , 还 可 以 避免 程序 今后 可 能 出 现 的 错误 。 


4.10 习题 


请 参考 课文 内 容 以 及 其 他 资料 ,完成 下 列 选择 题 。 
(1) 测试 程序 时 不 在 机 器 上 直接 运行 程序 ,而 是 采用 人 工 检 查 或 计算 机 辅助 静态 分 
析 的 手段 检查 程序 。 这 种 测试 称 为 ( )。 
A. 白 盒 测 试 B. 黑 盒 测 试 C. 静态 测试 D. 动态 测试 
(2) 以 下 关于 软件 测试 原则 的 说 法 中 ,错误 的 是 ( )。 
A. 在 设计 测试 用 例 时 ,不 但 要 包括 合理 的 输入 条 件 , 还 要 包括 不 合理 的 输入 
条 件 
B. 测试 过 程 中 某 模块 中 查 出 的 错误 越 多 ,该 模块 残留 的 错误 就 越 少 
C. 坚持 在 软件 开发 各 个 阶段 进行 技术 评审 ,才能 在 开发 过 程 中 尽早 发 现 和 预防 
错误 
D. 在 测试 过 程 中 要 严格 按照 测试 计划 执行 ,以 避免 发 生 玖 漏 或 重复 无 效 的 工作 
(3) 下 面 有 关 渐 增 式 集成 和 非 渐 增 式 集成 测试 的 说 法 中 错误 的 是 ( 
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A. 非 渐 增 式 集成 测试 方法 把 单元 测试 和 集成 测试 分 为 两 个 不 同 的 阶段 ,而 渐 增 
式 集成 测试 方法 往往 把 单元 测试 与 集成 测试 合 在 一 起 同时 完成 
B. 渐 增 式 集成 需要 较 多 的 工作 量 , 而 非 渐 增 式 集成 需要 的 工作 量 较 少 
C. 渐 增 式 集成 可 以 较 早 地 发 现 接口 错误 , 非 渐 增 式 集成 直到 最 后 组 装 时 才能 发 
现 接 口上 的 问题 
D. 渐 增 式 集成 有 利于 排 错 , 发 现 的 错误 往往 和 最 后 加 入 的 模块 有 关 。 非 渐 增 式 
集成 发 现 接口 错误 较 迟 且 很 难 判断 是 哪 一 部 分 接口 出 错 
(4) 以 下 不 属于 软件 需求 分 析 阶 段 测试 的 内 容 是 ( ys 
A. 通过 场景 走 查 和 与 用 户 沟通 ,看 需求 是 否 是 用 户 “ 真 ”的 需求 
B. 通过 对 开发 进度 、 开 发 费用 、 产 品 性 能 、 可 靠 性 和 内 存 使 用 等 各 方面 需求 的 分 
析 ,看 综合 起 来 是 否 合理 ,是 否 有 对 需求 的 一 个 优先 级 安排 
C. 通过 领域 分 析 和 与 用 户 沟通 ,看 需求 是 否 是 完备 的 
D. 通过 检查 需求 与 实现 环境 的 不 相 容 之 处 ,看 需求 是 否 可 兼容 
(5) 测试 方法 不 包括 ( Yo 
A. 数据 流 测试 ”B. 控制 流 测试 ”C. 随机 测试 D. 符号 求 值 
(6) 一 位 内 部 的 用 户 在 模拟 实际 操作 环境 下 进行 的 ,有 开发 人 员 参 与 的 测试 
0 
A. 接受 测试 B. 6 测试 C. B 测 试 D. a 测试 
(7) 以 下 说 法 中 错误 的 是 ( 5 
A. 单元 测试 一 般 采 用 白 盒 测试 方法 , 辅 以 黑 盒 测试 方法 
B. 集成 测试 主要 采用 黑 盒 测试 方法 , 辅 以 白 盒 测试 方法 
C. 配置 项 测试 一 般 采 用 白 盒 测试 方法 
D. 系统 测试 一 般 采 用 黑 盒 测试 方法 
(8) 测试 实施 策略 不 包括 ( i 


A. 要 使 用 的 测试 技术 和 工具 B. 缺陷 描述 和 处 理 标准 

C. 测试 完成 标准 D. 影响 资源 分 配 的 特殊 考虑 
(9) ( ) 是 一 种 独立 的 迭代 的 测试 模型 。 

A. W 模型 B. V 模型 C. HH 模 型 D. X 模 型 


(10) 自 底 向 上 单元 测试 的 策略 是 首先 对 模块 调用 图 上 的 哪 一 层 模块 进行 测 


?7( 


A. 最 底层 B; 下 晨 C. 最 高 层 D. 上 一 层 
(11) 下 列 关于 极限 测试 的 说 法 中 ,正确 的 是 ( )。 
A. 极限 测试 是 一 种 新 型 的 测试 方法 ,传统 的 测试 技术 均 不 适用 于 极限 测试 
B. 极限 测试 中 所 有 的 测试 均 是 由 编码 人 员 完 成 的 
C. 与 传统 的 软件 测试 相 比 ,极限 测试 是 一 种 更 严格 的 测试 
D. 极限 测试 需要 频繁 地 进行 单元 测试 
(12) 下 列 有 关 测 试 过 程 V 模型 的 说 法 中 ,正确 的 是 ( he 
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《软件 测试 技术 与 实 距 》 


A. 验收 测试 应 确定 程序 的 执行 是 否 满足 软件 设计 的 要 求 
B. 系统 测试 应 确定 系统 功能 和 性 能 的 质量 特性 是 否 达 到 系统 要 求 的 指标 
C. 单元 测试 和 集成 测试 应 确定 软件 的 实现 是 否 满足 用 户 需要 或 合同 的 要 求 
D. 集成 测试 在 编码 结束 前 就 可 以 开始 
(13) 测试 程序 时 不 在 机 器 上 直接 运行 程序 ,而 是 采用 人 工 检查 或 计算 机 辅助 静态 分 
析 的 手段 检查 程序 。 这 种 测试 称 为 (  )。 
A. 白 盒 测试 。 B. 黑 盒 测试 C. 静态 测试 D. 动态 测试 
(14) 如 果 一 个 软件 是 给 许多 客户 使 用 的 ,大 多 数 软件 厂商 要 使 用 几 种 测试 过 程 来 发 


现 那些 可 能 只 有 最 终 用 户 才 能 发 现 的 错误 。( ) 测试 是 由 软件 的 最 终 用 户 在 一 个 或 
多 个 用 户 实际 使 用 环境 下 来 进行 的 。( ) 测试 是 由 一 个 用 户 在 开发 者 的 场所 来 进行 
的 ,测试 的 目的 是 寻找 错误 的 原因 并 改正 之 。 

A\.B: Dalpha © beta © gamma @ delta 


4.11 实验 与 思考 
4.11.1 实验 目的 


本 节 “ 实 验 与 思考 ”的 目的 : 

(1) 熟悉 软件 测试 策略 性 方法 的 基本 概念 和 内 容 。 

(2) 通过 对 因特网 (Internet) 的 搜索 与 浏览 ,了 解 不 断 更 新 的 软件 测试 策略 ,掌握 通 
过 专业 网 站 不 断 丰 富 软 件 测试 技术 最 新 知识 的 学 习 方 法 。 

(3) 通过 对 论述 题 的 深入 分 析 和 讨论 ,逐步 了 解 和 掌握 软件 测试 的 基本 方法 。 


4.11.2 工具 /准备 工作 


在 开始 本 实验 之 前 ,请 认真 阅读 课程 的 相关 内 容 。 
需要 准备 一 台 带 有 浏览 器 、 能 够 访问 因特网 的 计算 机 。 


4.11.3 实验 内 容 与 步骤 


1) 专业 网 站 介绍 的 软件 测试 策略 

请 浏览 本 书 第 1 章 实验 中 介绍 的 软件 测试 专业 网 站 ,了 解 和 学 习 一 些 专业 文章 所 介 
绍 的 软件 测试 策略 ,并 简单 记录 如 下 (至 少 5 则 ) : 

A: 


软件 测试 策略 


2) 以 下 是 关于 某 图 书 管理 系统 的 描述 ,请 仔细 阅读 并 按 要 求 回答 问题 。 

某 图 书 管理 系统 有 以 下 功能 : 

A. 借 书 : 输入 读者 借 书 证 ,系统 首先 检查 借 书证 是 否 有 效 , 然 后 检查 该 读者 所 借 
图 书 是 否 超过 10 本 ,车 已 达到 , 则 拒 借 ;未 达到 10 本 ,办 理 借 书 ,修改 库存 并 
记录 。 

B. 还 书 : 从 借 书 文件 中 读 出 与 读者 有 关 的 记录 ,查阅 所 借 日 期 ,如 果 超 期 (1 个 月 ) 做 
罚款 处 理 ;否则 ,修改 库存 目录 与 借 书 文件 。 

C. 查询 : 可 通过 借 书 文件 .库存 目录 文件 查询 读者 情况 、 图 书 借阅 情况 及 库存 。 

(1) 请 在 一 白 纸 上 夯 出 该 图 书 管理 系统 的 控制 流程 图 ,并 粘贴 于 此 处 。 


(2) 使 用 基本 路 径 测 试 方法 确定 该 状态 图 的 测试 路 径 。 


@OQOG8e 


4.11.4 实验 总 结 


4.11.5 实验 评价 (教师 ) 
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4.12 阅读 与 分 析 : 初 识 “ 猴 子 测试 ” 


偶然 的 机 会 听 到 “猴子 测试 "这 个 名 词 ,感觉 很 有 意思 ,就 查找 相关 资料 ,看 了 一 番 。 

所 谓 的 猴子 测试 (Monkey Test), 即 搞怪 测试 ,在 软件 测试 中 ， 测试 者 可 以 进行 各 种 
稀奇 古怪 的 操作 模式 ,用 以 测试 软件 的 稳定 度 。 通 俗 来 讲 , 这 是 一 种 系统 对 信号 因子 输入 
稳健 性 的 测试 方法 ,一 般 用 于 计算 机 软件 程序 这 样 的 逻辑 严密 性 要 求 高 的 系统 。 

猴子 测试 这 个 名 字 来 源 于 “无 限 猴子 定理 ”, 即 “让 一 只 猴子 一 直 在 打字 机 上 按键 ,最 
终 能 完成 莎士比亚 的 全 部 工作 "意思 就 是 呆 子 按照 上 面 做 都 不 会 出 错 ,比如 你 做 出 来 的 
作业 指导 书 随 便 找 个 没有 经 验 的 人 ,只 要 按照 上 面 做 就 不 会 出 错 。 

猴子 测试 之 所 以 会 广泛 用 于 软件 Bug 测试 ,是 因为 系统 的 “可 重复 性 ”以 及 系统 输入 
因子 “有 限 性 ”和 “单纯 性 ”。 

通常 情况 下 ,复杂 的 测试 会 比 简单 的 测试 找到 更 多 的 Bug。 但 是 大 部 分 的 自动 化 测 
试 都 是 简单 的 。 我 们 期 待 一 个 输入 后 得 到 一 个 输出 ,然后 程序 回 到 一 个 已 知 的 基本 状态 ， 
然后 我 们 再 去 执行 另外 一 个 简单 的 测试 。 我 们 设计 测试 用 例 一 般 都 是 按照 一 定 的 逻辑 顺 
序 , 是 经 过 深思 熟 虑 的 ,但 是 这 样 的 测试 仍然 是 简单 的 测试 。 当 我 们 回 到 程序 的 基本 状 
态 , 则 丢弃 了 前 面 测试 的 “历史 ”。 而 真正 的 用 户 不 会 这 样 操作 ,他 们 把 一 系列 简单 的 动作 
串 起 来 ,形成 一 个 复杂 的 动作 流 。 

我 们 的 简单 测试 不 会 模拟 那些 用 户 行为 。 因 此 如 果 一 个 简单 的 动作 引起 了 另外 一 个 
动作 的 失败 ,我 们 的 简单 测试 不 会 找到 那个 Bug。 因 此 ,我 们 需要 使 用 复杂 序列 的 、 以 前 
未 使 用 过 的 测试 ,在 这 方面 猴子 比 人 更 有 效 。 

猴子 测试 就 是 百般 刁难 , 乱 按 一 通 ,系统 也 不 能 宕 机 或 者 数据 出 现 差错 ,这 样 才能 称 
得 上 是 经 得 起 考验 的 程序 。 

那 什么 时 候 使 用 猴子 测试 呢 ? 

一 般 在 产品 周期 的 后 半 段 , 当 我 们 在 想 我 们 已 经 找到 了 所 有 的 可 恶 的 Bug 时 ,猴子 
测试 就 能 帮助 我 们 提高 信心 。 运 行 猴子 测试 几 天 的 时 间 而 没有 引起 错误 能 让 我 们 从 另外 
一 个 角度 来 判断 程序 的 稳定 性 。 

我 们 不 难 发 现 猴子 测试 和 随机 测试 有 一 定 的 相关 性 ,但 二 者 还 是 有 一 定 的 区 别 的 。 

猴子 测试 : 它 针对 的 不 是 功能 点 ,而 是 业务 流程 。 功 能 点 好 测 , 它 是 明确 的 。 而 业务 
流程 难 测 , 它 是 随机 组 合 的 ,一 切 有 可 能 出 现 的 操作 ,都 是 一 个 测试 的 流程 。 而 我 们 用 例 ， 
大 部 分 是 正常 的 业务 流程 ,而 异常 测试 又 不 可 能 把 所 有 的 流程 测 到 ,所 以 出 现 了 猴子 测试 
的 概念 ,就 是 说 ,你 把 自己 看 成 白 病 , 随 便 乱 点 ,没有 任何 主观 想法 参与 进来 ,让 一 些 想 不 
到 的 操作 呈现 出 错误 来 。 

随机 测试 : 让 测试 人 员 充 分 发 挥 自己 的 想象 去 测试 , 它 没有 用 例 的 制约 ,主要 是 在 测 
试 感觉 不 充分 的 情况 下 应 用 。 其 实 即使 我 们 没有 增加 这 个 测试 阶段 ,我 们 也 一 直 在 做 随 
机 测试 ,因为 一 个 用 例 不 可 能 完全 准确 地 涵盖 功能 点 ,也 不 可 能 充分 指出 所 有 测试 方法 和 
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软件 测试 策略 


可 能 的 情况 ,所 以 想到 了 就 测试 了 ,就 是 这 么 一 种 感觉 吧 。 

在 我 们 的 测试 过 程 中 ,我 们 可 以 分 成 若干 层 来 进行 测试 : 执行 自己 设计 的 测试 用 例 ; 
进行 猴子 测试 ;进行 随机 测试 。 此 外 ,还 可 以 加 入 其 他 不 同 的 测试 方式 ,每 一 种 方式 都 有 
其 不 同 的 侧重 点 ,经 过 层 层 测试 后 ,我 们 对 我 们 的 软件 、 程 序 更 有 信心 。 

资料 来 源 : zhaoling,51Testing 软件 测试 网 采编 ,2012-2-10 13:41 。 
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第 5 章 测试 依据 和 规范 


标准 和 规范 是 行业 成 熟 的 标志 ,并 且 大 都 是 该 行业 长 期 积累 的 经 验 与 技术 的 结晶 。 
标准 化 是 组 织 现代 化 生产 的 重要 手段 ,是 科学 管理 的 重要 组 成 部 分 。 现 代 化 科学 管理 在 
某 种 程度 上 说 ,也 就 是 标准 化 (或 者 规范 化 ) 管 理 。 

测试 是 软件 生存 周期 中 一 个 独立 且 关 键 的 阶段 ,为 了 提高 检测 出 错误 的 概率 ,使 测试 
能 有 计划 、 有 条 不 亲 地 进行 ,必须 编制 测试 文件 。 而 标准 化 的 测试 文件 就 如 同一 种 通用 的 
参照 体系 ,可 达到 便于 交流 的 目的 。 文 件 中 规定 的 内 容 可 用 于 对 测试 过 程 完备 性 的 对 照 
检查 , 故 采用 这 些 文件 将 会 提高 测试 过 程 各 个 阶段 的 能 见 度 , 极 大 地 提高 测试 工作 的 可 管 
理性 。 


5.1 标准 化 基础 


标准 一 般 分 为 国际 标准 、 国 家 标准 、 行 业 标准 、 地 方 标准 和 企业 标准 等 五 级 。 

国际 标准 是 指 由 国际 权威 组 织 制 定 、 并 为 大 多 数 国家 所 承认 和 通用 的 标准 。 例 如 ,在 
信息 技术 领域 ,由 国际 标准 化 组 织 (ISO)、 国 际 电工 委员 会 (IEC)、 国 际 电气 和 电子 工程 师 
学 会 (IEEE) 以 及 国际 电报 和 电话 咨询 委员 会 (CCITT ,现在 已 经 被 称 为 ITU-T 一 一 国际 
标准 化 组 织 电信 标准 化 分 部 ) 等 机 构 制 定 的 标准 被 视 为 国际 标准 。 

国家 标准 是 指 由 国家 或 者 政府 标准 化 组 织 批 准 发 布 ,在 全 国 范围 内 统一 的 标准 。 各 
国 国 家 标准 前 面 通常 都 有 特殊 的 代号 。 例 如 : GB 代表 “中 华人 民 共 和 国 国家 标准 ”; 
ANSI(American National Standards Institute, 美 国 国家 标准 协会 ) 代 表 “ 美 国 国家 标准 ”; 
JIS(Japanese Industrial Standard) 代 表 “ 日 本 国家 标准 ”等 。 

行业 标准 是 指 因 没 有 对 应 的 国家 标准 而 又 需要 在 某 个 行业 范围 内 统一 而 制定 的 标 
准 。 行业 标准 通常 由 国家 标准 化 组 织 下 设 的 某 个 专业 技术 委员 会 负责 制定 。 在 中 国 , 行 
业 标 准 的 内 容 不 得 与 国家 标准 相抵 触 。 

军用 标准 是 指 由 某 个 国家 或 者 地 区 的 国防 或 者 军事 部 门 制定 和 发 布 的 标准 。 各 国 军 
用 标准 前 面 也 都 有 特殊 的 代号 。 例 如 : GJB 代表 “中 华人 民 共 和 国 国家 军用 标准 ”;DOD- 
STD (Department of Defence-Standards) 代表 “美国 国防 部 标准 ”; MIL-S (Military- 
Standard) 代 表 “ 美 国 军用 标准 ”。 

企业 标准 是 指 企 业 因 其 生产 的 产品 没有 相应 的 国家 标准 和 行业 标准 而 自行 制定 的 
标准 。 

地 方 标准 是 指 没有 对 应 的 国家 标准 和 行业 标准 而 又 需要 在 省 、 自 治 区 、 直 辖 市 范围 内 
统一 制定 的 标准 。 地 方 标准 通常 由 省 .自治 区 和 直辖 市 政府 设立 的 标准 化 机 构 负 责 制 定 。 
在 中 国 , 地 方 标准 的 内 容 不 得 与 国家 标准 和 行业 标准 相抵 触 。 


测试 依据 和 规范 


标准 的 代号 与 编号 简称 为 标准 号 。 标 准 号 既是 标准 外 形 的 一 大 特征 ,也 是 区 分 不 同 
标准 的 主要 标志 ,还 是 查找 标准 的 重要 入 口 。 中 国 国 家 标准 的 编号 方法 是 : GB 十 标准 顺 
序号 十 间隔 线 十 批准 (修订 ) 年 代号 。 例 如 ,现行 的 国家 标准 《国徽 ) 的 编号 是 : 
GB15093 一 1994。 

1988 年 12 月 29 日 颁布 的 (中 华人 民 共 和 国标 准 化 法 ?规定 强制 性 国家 标准 代号 为 
“GB” ,推荐 性 国家 标准 代号 为 "GB/T”。 

在 我 国 , 负 责 信息 技术 标准 化 具体 工作 的 主要 组 织 是 全 国 计 算 机 与 信息 处 理 标 准 化 
技术 委员 会 (学 术 团体 ?下属 的 各 分 支 技术 委员 会 。 

信息 技术 标准 化 的 内 容 十 分 丰富 ,主要 包括 信息 的 采集 、 编 码 与 记录 标准 .中 文 信息 
处 理 标准 ,数据 通信 与 开放 系统 互 连 标 准 、 软 件 工程 标准 、 信 息 的 安全 与 保密 标准 、 声 像 技 
术 标 准 以 及 文献 标准 等 七 大 类 。 


5.2 测试 的 标准 与 规范 


一 般 先 有 标准 ,然后 再 形成 规范 。 规 范 往往 是 标准 在 某 个 领域 的 具体 应 用 中 逐步 形 
成 的 ,是 更 具 该 领域 特点 ,更 易于 操作 的 标准 。 软 件 测 试 规范 可 分 为 行业 规范 与 操作 规 
范 , 行 业 规范 是 指 软件 行业 长 期 总 结 形成 的 通用 规范 ,而 操作 规范 则 指 某 一 公司 在 长 期 的 
软件 测试 工作 中 总 结 出 属于 自己 企业 的 规范 ,特别 是 对 于 专业 提供 测试 服务 的 企业 ,这 种 
操作 规范 内 容 与 实施 情况 往往 是 其 取得 软件 开发 商 信任 的 法 宝 。 


5.2.1 GB/T8567 规定 的 测试 文件 


在 GB/T8567 一 2008《 计 算 机 软件 文档 编制 规范 ) 所 规定 的 18 个 开发 文件 中 ,有 关 测 
试 的 文件 是 “软件 测试 计划 ”和 "软件 测试 报告 ”。 


1. 软件 测试 计划 


所 谓 软 件 配 置 项 (CSCI) 是 指 满足 最 终 使 用 功能 的 软件 集合 , 它 由 需 方 指定 进行 单独 
的 配置 管理 。CSCI 应 从 下 列 诸 因素 中 进行 折 中 选择 : 软件 功能 、 规 模 、 宿 主机 或 目标 计 
算 机 、 开 发 方 , 支 持 概念 、 重 用 计划 ,关键 性 ,接口 考虑 、 是 否 需 要 单独 编写 文档 和 控制 以 及 
其 他 因素 。 

《软件 测试 计划 》CSTP) 描 述 对 计算 机 软件 配置 项 .系统 或 子 系统 进行 合格 性 测试 的 
计划 安排 ,内 容 包括 进行 测试 的 环境 、 测 试 工作 的 标识 及 测试 工作 的 时 间 安 排 等 。 

通常 每 个 项 目 只 有 一 个 STP, 使 得 需 方 能 够 对 合格 性 测试 计划 的 充分 性 作出 评估 。 


2. 软件 测试 报告 


《软件 测试 报告 XSTR) 是 对 计算 机 软件 配置 项 ,软件 系统 或 子 系统 ,或 与 软件 相关 项 
目 执行 合格 性 测试 的 记录 。 
通过 STR, 需 方 能 够 评估 所 执行 的 合格 性 测试 及 其 测试 结果 。 
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5.2.2 GB/T9386 计算 机 软件 测试 文档 编制 规范 


《计算 机 软件 测试 文档 编制 规范 》(GB/T9386 一 2008) 规 定 了 一 组 描述 测试 行为 的 测 
试 文件 ,所 提出 的 文件 类 型 包括 测试 计划 、 测 试 说 明和 测试 报告 。GB/T9386 一 2008 中 的 
测试 文件 是 GB/T8567 中 “软件 测试 计划 ”及 “软件 测试 分 析 报 告 ” 这 两 个 文件 的 补充 和 
细 化 ,这 样 可 使 文件 的 书写 更 具体 、 更 有 参照 性 。 


5.2.3 GB/T15532 计算 机 软件 测试 规范 


本 标准 原名 《计算 机 软件 单元 测试 )(GB/T15532 一 1995), 后 改名 (计算 机 软件 测试 
规范 》(GB/T15532 一 2008) 。 

本 标准 规定 了 软件 生存 周期 内 各 类 软件 产品 的 基本 测试 方法 、. 过 程 和 准则 ,标准 适用 
于 软件 生存 周期 全 过 程 。 根 据 GB/T8566 的 要 求 ,标准 对 单元 测试 .集成 测试 .配置 项 测 
试 (也 称 确认 测试 )、 系 统 测试 ,验收 测试 和 回归 测试 等 作 了 详细 描述 。 

一 个 完整 的 软件 测试 规范 ,应 该 包括 规范 本 身 的 详细 说 明 , 比 如 规范 目的 ,范围 文档 
结构 ,词汇 表 、 参 考 信息 、 可 追溯 性 ,方针 、 过 程 /规范 、 指 南 、 模 板 、 检 查 表 、 培 训 \ 工 具 、 参 考 
资料 等 。 本 标准 内 容 包 括 了 软件 测试 的 每 个 子 过 程 中 测试 人 员 的 角色 职责、 活动 描述 及 
所 需 资料 等 。 

1) 角色 

任何 项 目的 实施 首先 要 考虑 的 是 人 的 因素 ,对 人 的 识别 与 确认 ,软件 测试 尤其 不 能 例 
外 。 在 软件 测试 中 ,通常 会 把 所 有 涉及 人 员 进 行 分 类 以 确立 角色 ,并 按 角色 进行 职责 划 
分 。 通 常会 按 表 5-1 的 方式 进行 划分 。 

表 5-1 软件 测试 中 最 基本 的 角色 定义 


角 色 说 有明 
测试 设计 人 员 制定 和 维护 测试 计划 ,设计 测试 用 例 及 测试 过 程 ,生成 测试 分 析 报 告 
测试 人 员 执行 集成 测试 和 系统 测试 ,记录 测试 结果 
设计 人 员 设计 测试 需要 的 驱动 程序 和 桩 程序 
编码 人 员 编写 测试 驱动 程序 和 桩 程序 ,执行 单元 测试 
2) 进入 准则 


进入 准则 也 就 是 对 软件 测试 切入 点 的 确立 。 我 们 知道 ,软件 测试 实质 上 是 伴随 SQA 
的 整体 活动 ,在 软件 开发 周期 的 各 个 阶段 都 在 进行 ,因此 软件 项 目 立项 并 得 到 批准 就 意味 
着 软件 测试 的 开始 。 

3) 输入 项 

软件 测试 需要 相关 的 文档 作为 测试 设计 及 测试 过 程 判 断 符 合 性 的 依据 和 标准 ,对 于 
需要 进行 专业 的 单元 测试 的 项 目 还 得 有 程序 单元 及 软件 集成 计划 相应 版 本 等 文档 资料 。 
这 些 文档 一 并 作为 测试 的 输入 ,如 表 5-2 所 示 。 


96 


表 5-2 软件 测试 输入 项 


测试 依据 和 规范 


输 入 项 说 明 文 档 
、 软件 项 目 计划 是 一 个 综合 的 组 装 工件 ,用 来 收集 管理 
软件 项 目 计划 ee dn (项目 开发 计划 》 
描述 软件 需求 的 文档 ,如 软件 需求 规约 (SRS) 文 档 或 
次 林 备 求 六 挡 利用 CASE 工具 建 模 生成 的 文档 《再 环 夫 六 说明 书 》 
本 构架 设计 文档 主要 描述 备 选 设计 方案 .软件 子 系统 划 a 
软件 构架 设计 文档 “| 久生 3 《概要 设计 说 明 书 》 
a 详细 设计 文档 主要 描述 将 构架 设计 转化 为 最 小 实施 | ， 
软件 详细 设计 文档 | 单 所 nD 《详细 设计 说 明 书 》 
软件 程序 单元 包括 了 所 有 编码 员 完成 的 程序 单元 源 代码 
、 软件 工作 版 本 的 定义 ,工作 版 本 的 内 容 、 集 成 的 策略 
软件 集成 计划 以 及 实施 的 先后 顺序 等 
软件 工作 版 本 按照 集成 计划 创建 的 各 个 集成 工作 版 本 
4) 活动 
(1) 制定 测试 计划 。 
角色 : 测试 设计 员 。 
活动 描述 : 


角色 : 测试 设计 员 、 设 计 员 。 
活动 描述 : 设计 测试 的 目的 是 为 每 一 个 测试 需求 确定 测试 用 例 集 , 并 且 确 定 执行 测 


试用 例 的 测试 过 程 。 


。， 设计 测试 用 例 。 
。 对 每 一 个 测试 需求 ,确定 其 需要 的 测试 用 例 。 
。 对 每 一 个 测试 用 例 ,确定 其 输入 及 预期 结果 。 


。 确定 测试 用 例 的 测试 环境 配置 .需要 的 驱动 程序 或 桩 程序 。 


。 编写 测试 用 例文 档 。 
。 对 测试 用 例 进行 同行 评审 。 
。 开 发 测试 过 程 。 
。 根据 界面 原型 为 每 一 个 测试 用 例 定义 详细 的 测试 步骤 。 
。 为 每 一 测试 步骤 定义 详细 的 测试 结果 验证 方法 。 


制定 测试 计划 的 目的 是 收集 和 组 织 测试 计划 信息 ,并 且 创 建 测试 计划 。 

确定 测试 需求 。 根 据 需 求 收集 和 组 织 测 试 需求 信息 ,确定 测试 需求 。 

制定 测试 策略 。 针 对 测试 需求 定义 测试 类 型 ,测试 方法 以 及 需要 的 测试 工具 等 。 
建立 测试 通过 准则 。 根 据 项 目 实际 情况 为 每 一 个 层次 的 测试 建立 通过 准则 。 
确定 资源 和 进度 。 确 定 测试 需要 的 软 硬 件 资源 、 人 力 资源 以 及 测试 进度 。 

评审 测试 计划 。 根 据 同 行 评审 规范 对 测试 计划 进行 同行 评审 。 

(2) 测试 设计 。 
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。 为 测试 用 例 准 备 输入 数据 。 

。 编写 测试 过 程 文档 。 

。 对 测试 过 程 进行 同行 评审 。 

。 在 实施 测试 时 对 测试 过 程 进行 更 改 。 

设计 单元 测试 和 集成 测试 需要 的 驱动 程序 和 桩 程序 。 

(3) 实施 测试 。 

角色 : 测试 设计 员 ,编码 员 。 

活动 描述 : 实施 测试 的 目的 是 创建 可 重用 的 测试 脚本 ,并 且 实 施 测试 驱动 程序 和 桩 


程序 。 


。 根据 测试 过 程 ,创建 .开发 测试 脚本 ,并 且 调试 测试 脚本 。 

。 根据 设计 编写 测试 需要 的 测试 驱动 程序 和 桩 程序 。 

(4) 执行 单元 测试 。 

角色 : 编码 员 和 测试 人 员 。 

活动 描述 : 执行 单元 测试 的 目的 是 验证 单元 的 内 部 结构 以 及 单元 实现 的 功能 。 
。 按照 测试 过 程 ,手工 执行 单元 测试 或 运行 测试 脚本 自动 执行 测试 。 

。 详细 记录 单元 测试 结果 ,并 将 测试 结果 提交 给 相关 组 。 

。 回归 测试 : 对 修改 后 的 单元 执行 回归 测试 。 

(5) 执行 集成 测试 。 

角色 : 测试 员 。 

活动 描述 : 执行 集成 测试 的 目的 是 验证 单元 之 间 的 接口 以 及 集成 工作 的 功能 、 性 


能 等 。 


。 执行 集成 测试 : 按照 测试 过 程 ,手工 执行 集成 测试 或 运行 测试 自动 化 脚本 执行 集 
成 测试 。 

。 详细 记录 集成 测试 结果 ,并 将 测试 结果 提交 给 相关 组 。 

。 回归 测试 : 对 修改 后 的 工作 版 本 执行 回归 测试 ,或 对 增 量 集成 后 的 版 本 执行 回归 
测试 。 

(6) 执行 系统 测试 。 

角色 : 测试 员 。 

活动 描述 : 执行 系统 测试 的 目的 是 确认 软件 系统 工作 版 本 满足 需求 。 

。 执行 系统 测试 : 按照 测试 过 程 手工 执行 系统 测试 或 运行 测试 脚本 自动 执行 系统 
测试 。 

。 详细 记录 系统 测试 结果 ,并 将 测试 结果 提交 给 相关 组 。 

。 回归 测试 : 对 修改 后 的 软件 系统 版 本 执行 回归 测试 。 

(7) 评估 测试 。 

角色 : 测试 设计 员 和 相关 组 。 

活动 描述 : 评估 测试 的 目的 是 对 每 一 次 测试 结果 进行 分 析 评 估 , 在 每 一 个 测试 阶段 


提交 测试 分 析 报告 。 


”分 析 测试 结果 ;由 相关 组 对 一 次 测试 结果 进行 分 析 , 并 提出 变更 请 求 或 其 他 处 理 


意见 。 


。 分 析 阶 段 测试 情况 。 


。 对 每 一 
。 对 每 一 


个 阶段 的 测试 覆盖 情况 进行 评估 。 
个 阶段 发 现 的 缺陷 进行 统计 分 析 。 


。 确定 每 一 个 测试 阶段 是 否 完成 测试 。 
。 对 每 一 个 阶段 生成 测试 分 析 报 告 。 
5) 输出 项 ( 见 表 5-3) 


表 5-3 软件 测试 输出 项 


测试 依据 和 规范 


输出 项 


内 容 描述 


形成 的 文档 


软件 测试 计划 


测试 计划 包含 项 目 范围 内 的 测试 目的 和 测试 目标 的 有 关 信 息 。 
此 外 ,测试 计划 确定 了 实施 和 执行 测试 时 使 用 的 策略 ,同时 还 
确定 了 所 需 资源 


软件 测试 计划 模板 


软件 测试 用 例 


测试 用 例 是 为 了 特定 目标 开发 的 测试 输入 、 执 行 条 件 和 预期 结 
果 的 集合 


软件 测试 用 例 模板 


软件 测试 过 程 


测试 过 程 是 对 给 定 测试 用 例 ( 或 测试 用 例 集 ) 的 设置 ,执行 和 结 
果 评 估 的 详细 说 明 的 集合 


软件 测试 过 程 模 板 


测试 结果 日 志 


测试 结果 是 记录 测试 期 间 测 试用 例 的 执行 情况 ,记录 测试 发 现 
的 缺陷 ,并 且 用 来 对 缺陷 进行 跟踪 


测试 结果 日 志 模 板 


测试 分 析 报 告 


测试 分 析 报 告 是 对 每 一 个 阶段 (单元 测试 、 集 成 测试 、 系 统 测 
试 ) 的 测试 结果 进行 的 分 析 评 估 


6) 验证 与 确认 ( 见 表 5-4) 


表 5-4 软件 测试 验证 与 确认 项 


测试 分 析 报 告 模板 


验证 与 确认 内 容 内 容 描述 
软件 测试 计划 评审 由 项 目 经 理 \ 测 试 组 、 其 他 相关 测试 计划 进行 评审 
软件 测试 用 例 评审 由 测试 组 .其 他 相关 组 对 测试 用 例 进 行 评 审 
软件 测试 过 程 评审 由 测试 组 ,其 他 相关 组 对 测试 过 程 进行 评审 
测试 结果 评估 由 测试 组 .其 他 相关 组 对 测试 结果 进行 评估 
测试 分 析 报告 评审 由 项 目 经 理 \ 测 试 组 ,其 他 相关 组 对 测试 分 析 报 告 进行 评审 
SQA 验证 由 SQA 人 员 对 软件 测试 活动 进行 审计 
7) 退出 准则 
满足 组 织 /项 目的 测试 停止 标准 。 
8) 度量 


软件 测试 活动 达到 退出 准则 的 要 求 时 ,对 于 当前 版 本 的 测试 即 告 停止 。 度 量 工 作 一 
般 由 SQA 人 员 通 过 一 系列 活动 收集 数据 ,利用 统计 学 知识 对 软件 质量 进行 统计 分 析 , 得 
出 较 准 确 的 软件 质量 可 靠 性 评估 报告 ,作为 提供 给 客户 及 供 方 高 层 领导 的 可 视 化 的 质量 


信息 。 


ee——.———— 
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5.3 测试 过 程 模型 


模型 是 对 事物 的 一 种 抽象 ,人 们 常常 在 正式 建造 实物 之 前 ,首先 建立 一 个 简化 的 模 
型 ,以 便 更 透彻 地 了 解 它 的 本 质 , 抓 住 问题 的 要 害 。 在 模型 中 , 先 要 剔除 那些 与 问题 无 关 
的 、 非 本 质 的 东西 ,从 而 使 模型 与 真实 的 实体 相 比 更 加 简单 明了 、 易 于 把 握 。 总 的 来 说 ,使 
用 模型 可 以 使 人 们 从 全 局 上 把 握 系统 的 全 貌 及 其 相关 部 件 之 间 的 关系 ,可 以 防止 人 们 过 
早 地 陷入 各 个 模块 的 细节 。 

建立 简明 准确 的 表示 模型 是 把 握 复 杂 系 统 的 关键 。 为 了 更 好 地 理解 软件 测试 过 程 的 
特性 ,跟踪 ,控制 和 改进 软件 产品 的 测试 过 程 ,就 必须 将 软件 测试 过 程 模型 化 。 


5.3.1 软件 过 程 模型 


谈 到 软件 过 程 模型 ,人 们 首先 就 会 想到 瀑布 模型 。 瀑 布 模型 是 最 经 典 的 过 程 模型 ,是 
认识 软件 过 程 的 切入 点 ,但 是 , 随 着 软件 开发 技术 的 不 断 发 展 ,瀑布 模型 和 现代 软件 实践 
冲突 越 来 越 大 ,其 应 用 受到 很 大 局 限 。 如 今 , 人 们 更 多 地 关注 原型 .迭代 ,敏捷 过 程 和 并 发 
等 过 程 模 型 。 例 如 ,原型 模型 强调 需求 的 分 析 和 定义 ,使 开发 团队 能 够 借助 产品 原型 与 用 
户 、 产 品 经 理 等 进行 沟通 、 交 流 , 相 互 之 间 更 容易 理解 ,并 能 挖掘 客户 的 真正 需求 ,开发 出 
客户 满意 的 产品 。 

1) 迭代 模型 

软件 开发 不 是 一 跳 而 就 的 ,其 过 程 犹如 雕琢 一 件 工艺 品 ,由 无 形 到 有 形 、 由 粗 到 细 , 很 
难 一 次 就 能 开发 出 功能 完善 .强大 的 一 个 版 本 ,而 往往 会 受到 很 大 的 市 场 压 力 、 开 发 预算 
或 成 本 预算 的 限制 ,软件 复杂 度 的 挑战 等 ,软件 产品 的 开发 不 得 不 采取 分 阶段 进行 ,逐步 
完善 或 深化 系统 的 功能 ,一 个 版 本 接 一 个 版 本 地 发 布 出 去 。 这 种 分 阶段 开发 的 方法 比较 
普遍 ,一 般 会 采用 增 量 模型 和 和 迭代 模型 来 完成 。 

(1) 增 量 模型 。 描 述 软 件 产品 的 不 同 阶段 是 按 产品 所 具有 的 功能 进行 划分 的 。 先 开 
发 主要 功能 或 用 户 最 需要 的 功能 。 然 后 , 随 着 时 间 的 推进 ,不 断 增加 新 的 辅助 功能 或 次 要 
功能 ,如 图 5-1 所 示 。 


[| | 国 计 
一 
图 5-1 软件 分 阶段 增 量 模型 示意 图 


(2) 和 迭代 模型 。 描 述 软件 产品 的 不 同 阶段 是 按 产 品 深 度 或 细 化 的 程度 来 划分 的 。 先 
将 产品 的 整个 框架 都 建立 起 来 ,在 系统 的 初期 ,已 经 具有 用 户 所 需求 的 全 部 功能 。 然 后 ， 
随 着 时 间 推 进 ,不 断 细 化 已 有 的 功能 或 完善 已 有 功能 ,这 个 过 程 好 像 是 一 个 迭代 的 过 程 ， 
如 图 5-2 所 示 。 

2) IBM Rational 统一 过 程 

IBM Rational 统一 过 程 (RUP) 是 IBM 创造 的 软件 工程 方法 。RUP 描述 了 如 何 有 效 
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[ Em E | 一 加 ] 


图 5-2 软件 分 阶段 迭代 模型 示意 图 


地 利用 商业 的 可 靠 方 法 开发 和 部 署 软件 ,特别 适用 于 大 型 软件 团队 开发 大 型 项 目 。RUP 
是 以 用 例 驱 动 (use case driven) ,以 体系 结构 为 中 心 (architecture-centric) 的 软件 开发 迭 
代 过 程 。 RUP 把 软件 的 生命 周期 划分 为 4 个 阶段 一 一 先 启 阶 段 (或 称 初始 阶段 )、 精 化 阶 
段 ( 或 称 细 化 阶段 ) 构建 阶段 (或 称 构造 阶段 ) 和 产品 化 阶段 (或 称 交 付 阶 段 )。RUP 中 的 
每 个 阶段 都 可 以 进一步 分 解 为 迭代 。 随 着 时 间 的 推移 ,每 个 阶段 所 注重 的 焦点 在 不 断 发 
生变 化 ,而 且 无 论 是 整个 软件 阶段 还 是 每 个 子 阶段 ,都 是 通过 不 断 迭 代 来 完成 新 的 任务 ， 
从 而 形成 一 个 完整 的 循环 的 迭代 过 程 。 

换 句 话说 ,RUP 在 每 次 迭代 中 只 考虑 系统 的 一 部 分 需求 ,针对 这 部 分 需求 进行 分 析 、 
设计 实现 ,测试 和 部 署 等 工作 。 每 次 迭代 都 是 在 系统 已 完成 部 分 的 基础 上 进行 的 ,每 次 
能 够 给 系统 增加 一 些 新 的 功能 ,如 此 循环 往复 地 进行 下 去 ,直至 最 终 完成 项 目 。 

在 RUP 中 ,测试 贯穿 于 整个 软件 开发 的 生命 周期 ,从 先 启 阶段 的 早期 就 介入 进去 ， 
直至 产品 化 阶段 结束 ,只 是 在 构建 阶段 的 工作 量 相 对 大 些 。 

在 软件 工程 领域 ,与 RUP 齐名 的 软件 方法 还 有 : 净 室 软 件 工程 (重量 级 ) ,极限 编程 
和 其 他 敏捷 软件 开发 方法 学 ( 轻 量 级 ) 。 

3) 敏捷 过 程 模型 

与 RUP 不 同 , 敏 捷 过 程 模型 (如 eXtreme Programming、Scrum 等 ) 弱 化 针对 未 来 需 
求 的 设计 而 注重 当前 系统 的 简化 ,依赖 重 构 来 适应 需求 的 变化 ;而 且 从 用 例 开始 ,强调 与 
用 户 的 实时 沟通 .用户 的 参与 ,树立 测试 驱动 开发 理念 .增强 测试 实施 的 力度 ,建立 一 个 灵 
活 的 软件 过 程 。 极 限 编程 (XP) 是 敏捷 方法 的 代表 之 一 ,强调 软件 发 布 版 本 小 、 周 期 短 、 速 
度 快 ,其 核心 是 迭代 ,通过 一 次 次 的 迭代 使 产品 不 断 完善 ,同时 用 户 能 及 时 得 到 他 们 想 要 
的 功能 。 另 一 方面 ,软件 开发 组 织 可 以 及 时 获得 用 户 的 反馈 \ 调 整 产品 功能 特性 的 定义 来 
适应 用 户 不 断 变化 的 需求 ,而 不 至 于 造成 在 某 个 时 刻 的 大 规模 返工 一 一 损失 惨重 。XP 
所 呈现 的 软件 过 程 ,如 图 5-3 所 示 。 


测试 场景 
用 户 案例 
a 新 用 户 案例 
系统 隐喻 发 布 计 划 最 后 版 本 用 户 认同 
~ 发 布 计划 -| | 一 验收 测试 ~ 小 版 本 发 布 


不 确定 确信 的 
的 评估 评估 
试探 本 二 - 


图 5-3 极限 编程 生命 周期 


从 XP 过 程 来 看 ,测试 从 一 开始 就 介入 , 当 拿 到 用 例 (use case) 时 ,测试 人 员 就 要 将 用 
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例 转换 为 测试 场景 (test scenario) ,设计 相应 的 验收 测试 用 例 , 保 证 各 个 小 版 本 的 产品 质 
量 可 以 满足 用 户 需求 。 无 论 是 从 RUP 还 是 从 XP 看 ,测试 是 贯穿 整个 软件 开发 生命 周 
期 的 。 


5.3.2 V 模型 


软件 测试 模型 与 软件 测试 标准 的 研究 也 随 着 软件 工程 的 发 展 而 越 来 越 深 入 。20 世 
纪 80 年 代 后 期 ,Paul Rook 提出 了 著名 的 软件 测试 V 模型 , 旨 在 改进 软件 开发 的 效率 和 
效果 。V 模型 也 称快 速 应 用 开发 (Rap Application Development，RAD) 模 型 , 即 RAD 
模型 。 

从 V 模型 出 发 ,通过 扩展 可 以 获得 有 关 软 件 测试 的 更 多 信息 。 在 进行 需求 分 析 和 定 
义 、 系 统 设计 、 详 细 功 能 设计 等 过 程 中 ,测试 团队 要 进行 测试 需求 定义 ,测试 计划 等 活动 。 
除 此 之 外 ,测试 团队 还 有 更 多 的 工作 要 做 ,充分 体现 全 过 程 的 软件 测试 ,如 图 5-4 所 示 。 

需求 定义 评审 + 

ES 验收 测试 用 例 设计 
系统 设计 评审 + 系统 测试 
用 例 设计 + 测试 环境 准备 
系统 设计 准 =----- 一 一- 一 一 一 系统 测试 
功能 设计 评审 + 


测试 用 例 设计 
详细 功能 设计 届 =----- 一 - 功能 测试 


需求 分 析 


验收 测试 


构建 过 程 单元 测试 验证 过 程 


图 5-4 V 模 型 


(1) 当 开 发 人 员 进 行 需求 分 析 和 定义 时 ,测试 人 员 不 仅 参 与 需求 分 析 、 对 需求 定义 进 
行 评 审 , 了 解 产 品 的 设计 特性 和 用 户 的 真正 需求 ,及 时 找 出 需求 定义 中 的 问题 ,而 且 可 以 
根据 需求 定义 文档 ,准备 验收 测试 计划 ,设计 验收 测试 用 例 ,为 将 来 验收 测试 做 好 准备 。 
虽然 验收 测试 是 在 较 后 的 阶段 执行 ,但 它 的 计划 和 设计 工作 却 是 最 早 的 。 

(2) 当 架 构 师 或 其 他 开发 人 员 在 做 系统 设计 时 ,测试 人 员 不 仅 了 解 系统 是 如 何 实现 
的 ,了 解 系统 设计 中 有 没有 充分 考虑 系统 的 非 功能 特性 (性 能 、 安 全 性 、 容 错 性 等 ), 还 和 开 
发 人 员 讨 论 如 何 验证 系统 的 非 功能 特性 。 测 试 人 员 还 对 系统 设计 结果 进行 评审 ,及 时 发 
现 系 统 设 计 的 问题 ,包括 所 设计 的 非 功能 特性 (性 能 、 安 全 性 ,兼容 性 等 ) 是 否 具 有 可 测 性 ， 
而 且 要 准备 相应 的 系统 测试 计划 ,设计 相应 的 系统 测试 用 例 , 同 时 根据 系统 所 设计 的 平台 
和 架构 ,开始 准备 系统 的 测试 环境 ,包括 硬件 和 第 三 方 软件 的 采购 。 实 际 上 ,这 些 准备 工 
作 也 需要 较 长 的 时 间 。 

(3) 在 进行 详细 设计 时 ,测试 人 员 不 仅 和 产品 .开发 等 各 个 方面 的 人 员 讨论 ,完成 设 
计 规 格 说 明 书 的 评审 , 及 时 发 现 详细 功能 设计 的 问题 ,而 且 可 以 设计 相应 的 功能 测试 
用 例 。 

(4) 一 面 编程 ,一 面 进行 单元 测试 ,是 一 种 很 有 效 的 办 法 ,可 以 尽快 找 出 程序 中 的 错 
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误 。 充 分 的 单元 测试 可 以 大 幅度 提高 程序 质量 减少 成 本 。 


5.3.3 W 模型 


Evolutif 公司 针对 V 模型 的 缺陷 ,相对 于 V 模型 ,提出 了 W 模型 的 概念 。W 模型 增 
加 了 软件 各 开发 阶段 中 应 同步 进行 的 验证 和 确认 活动 ,如 图 5-5 所 示 。 


需求 分 析 定 义 


下 ~Q 测试 目标 缺陷 修正 Si 验收 测试 


、 雷 来 评审 
、 pA 
系统 、 结 构 设计 “一 一 i 一 = 一 系统 测试 
、 和 环境 
/ 
详细 或 程序 设计 pf 功能 测试 
页 陷 修正 
用 : 
天守 和 例 设 记 , | 
Bs Wi 编码 及 单元 测试 Cf 上 Cf 代码 审查 
单元 测试 


图 5-5 ”测试 过 程 和 开发 过 程 的 同步 关系 


W 模型 由 两 个 V 模型 组 成 ,分 别 代 表 测 试 与 开发 过 程 ,图 中 明确 表示 出 了 测试 与 开 
发 的 并 行 关 系 , 测 试 伴随 着 整个 软件 开发 周期 ,而且 测试 的 对 象 不 仅仅 是 程序 ,还 包括 需 
求 定义 文档 ` 设 计 文档 等 ,这 和 上 面 所 扩展 的 V 模型 有 相同 的 内 涵 。 例 如 ,需求 分 析 完 成 
后 ,测试 人 员 就 应 该 参与 到 对 需求 的 验证 和 确认 活动 中 ,以 尽早 地 找 出 缺陷 所 在 。 同 时 ， 
对 需求 的 测试 也 有 利于 及 时 了 解 项 目 难 度 和 测试 风险 ,及早 制定 应 对 措施 ,这 将 显著 减少 
总 体 测试 时 间 , 加 快 项 目 进度 。 

从 图 5-5 可 以 看 出 ,软件 分 析 、 设 计 和 实现 的 过 程 ,同时 伴随 着 软件 测试 一 一 验证 和 
确认 的 过 程 ,而 且 包 括 软 件 测试 目标 设 定 、 测 试 计划 和 用 例 设 计 、 测试 环境 建立 等 一 系列 
测试 活动 的 过 程 。 也 就 是 说 ,项 目 一 启动 ,软件 测试 的 工作 也 就 启动 了 ,避免 了 瀑布 模型 
所 带 来 的 误区 一 一 软件 测试 是 在 代码 完成 之 后 进行 的 。 测 试 过 程 和 开发 过 程 贯穿 软件 过 
程 的 整个 生命 周期 ,它们 是 相辅相成 .相互 依赖 的 关系 ,概括 起 来 有 3 个 关键 点 : 

(1) 测试 过 程 和 开发 过 程 是 同时 开始 的 ,同时 结束 的 ,两 者 保持 同步 的 关系 。 

(2) 测试 过 程 是 对 开发 过 程 中 阶段 性 成 果 和 最 终 的 产品 进行 验证 的 过 程 ,所 以 两 者 
相互 依赖 。 前 期 ,测试 过 程 更 多 地 依赖 于 开发 过 程 ,后 期 ,开发 过 程 更 多 地 依赖 于 测试 
过 程 。 

(3) 测试 过 程 中 的 工作 重点 和 开发 工作 的 重点 ,可 能 是 不 一 样 的 ,两 者 有 各 自 的 特 
点 。 不 论 在 资源 管理 ,还 是 在 风险 管理 方面 ,两 者 都 存在 着 差异 。 


5.3.4 TMap 模型 


TMap(Test Management Approach, 测 试管 理 方法 ) 是 一 种 结构 化 的 、 基 于 风险 策略 
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的 测试 方法 体系 ,其 目的 是 能 更 早 地 发 现 缺陷 ,以 最 小 的 成 本 有 效 地 完成 测试 任务 ,以 减 
少 软件 发 布 后 的 支持 成 本 。TMap 所 定义 的 测试 生命 周期 由 计划 和 控制 准备、 说 明 、 执 
行 和 完成 等 阶段 组 成 ,如 图 5-6 所 示 。 这 个 过 程 目前 也 被 ISTQB( 国 际 软件 测试 资质 认证 
委员 会 ) 所 采用 ,成 为 测试 过 程 的 标准 。 
准备 )， 介 括 可 。S( 说 明 ): 包括 详细 设计 
基本 各个 丘 江油 试用 合 、 建 测试 的 。 B( 执 行 ， 包 括 预 负 试 、 


下 基础 设施 等 测试 、 重 新 测试 、 检 查 、 
人 /一 评估 等 活动 


ee 
JITTT (完成 ): 包括 维护 


测试 件 、 评 估 测 试 
过 程 等 


P&C( 计 划 和 控制 ): 包括 评审 和 

研究 、 开 发 测试 策略 (风险 分 析 、 
测试 估算 等 )、 建 立 测试 组 织 、 准 
备 计划 、 管 理 和 控制 等 


图 5-6 TMap 描述 的 生命 周期 模型 


(1) 计划 和 控制 阶段 。 涉 及 测试 计划 的 创建 ,定义 了 执行 测试 活动 的 "who，what， 
when，where and how”。 在 测试 过 程 中 ,通过 定期 和 临时 的 报告 ,客户 可 以 经 常 收 到 关于 
产品 质量 和 风险 的 更 新 。 

(2) 准备 阶段 。 决 定 软 件 说 明 书 质量 是 否 足以 实现 说 明 书 和 测试 执行 的 成 功 。 

(3) 说 明 阶段 。 涉 及 定义 测试 用 例 和 构建 基础 设施 。 一 旦 测试 目标 确定 ,测试 执行 
阶段 就 开始 。 

(4) 执行 阶段 。 需 要 分 析 预 计 结 果 和 实际 结果 的 区 别 ,发现 缺陷 并 报告 缺陷 。 

(5) 完成 阶段 。 包 括 对 测试 资料 的 维护 以 便于 再 利用 ,创建 一 个 最 终 的 报告 以 及 为 
了 更 好 地 控制 将 来 的 测试 过 程 对 测试 过 程 进行 评估 。 

TMap 提供 了 一 个 完整 的 ,一 致 的 .灵活 的 方法 ( 见 表 5-5) ,可 以 根据 特定 环境 创建 量 
身 订 制 的 测试 方法 ,以 及 在 不 同 的 特定 环境 中 可 以 采用 的 通用 方法 ,从 而 适合 于 各 种 行业 
以 及 各 种 规模 的 组 织 。 

表 5-5 TMap 方法 模型 基本 内 容 


序 号 阶段 /类 别 活 动 
1 完成 任务 安排 
2 全 局 的 评审 和 研究 
3 计划 建立 测试 基线 
4 确定 测试 策略 
5 建立 测试 组 织 
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续 表 
序 号 阶段 /类 别 活 动 
6 明确 说 明 需 提交 的 测试 结果 
沁 明确 说 明 测试 基础 设施 
8 计划 组 织 管理 和 控制 
9 建立 进度 表 
10 合并 测试 计划 
11 维护 测试 计划 
中 控制 测试 过 程 
控制 
13 报告 
14 建立 详细 的 测试 进度 表 
15 测试 基线 的 可 测试 性 评审 
16 定义 测试 单元 
一 一 一 一 准备 
17 指定 测试 规格 说 明 书 
18 明确 说 明 测试 的 基础 设施 
19 准备 测试 规格 说 明 书 
20 定义 初始 的 测试 数据 库 
21 开发 测试 脚本 
= 说 明 
22 设计 测试 场景 
23 测试 目标 和 基础 设施 的 评审 说 明 
24 构建 测试 基础 设施 
25 测试 目标 和 基础 设施 的 评审 
26 建立 初始 的 测试 数据 库 
一 一 一 一 执行 
27 执行 测试 
28 比较 和 分 析 测 试 结果 
29 完成 解散 测试 团队 


TMap 为 实现 有 效 的 和 高 效 的 测试 过 程 提供 了 一 个 途径 ,使 得 软件 组 织 可 以 实现 关 
键 的 商业 目标 。 有 效 是 因为 能 发 现 与 产品 风险 直接 相关 的 重要 缺陷 ,高 效 则 是 因为 
TMap 是 一 个 普遍 适用 的 方法 , 它 强调 重用 并 采用 基于 风险 的 策略 。 这 样 的 策略 使 得 人 
们 需要 做 出 明智 的 决定 : 测试 什么 和 如 何 彻底 测试 它们 而 不 是 测试 所 有 内 容 。 


5.3.5 测试 过 程 改 进 模型 


随 着 软件 产业 界 对 软件 过 程 的 不 断 研究 ,美国 工业 界 和 政府 部 门 开始 认识 到 ,软件 过 
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程 能 力 的 不 断 改 进 才 是 增强 软件 组 织 的 开发 能 力 和 提高 软件 质量 的 第 一 要 素 。 在 这 种 背 
景 下 ,由 美国 卡 内 基 - 梅 隆 大 学 软件 工程 研究 所 (SED 研 制 并 推出 了 软件 能 力 成 熟 度 模型 
(Software-Capacity Maturity Model，SW-CMM) , SW-CMM 逐渐 成 为 了 评估 软件 开发 
过 程 管理 以 及 工程 能 力 的 标准 。 但 是 ,SW-CMM 没有 提 及 软件 测试 成 熟 度 的 概念 ,没有 
充分 讨论 如 何 改 进 测 试 过 程 , 所 以 ,许多 研究 机 构 和 测试 服务 机 构 从 不 同 角度 出 发 提出 有 
关 软 件 测试 方面 的 能 力 成 熟 度 模型 ,作为 对 SELCMM 的 有 效 补 充 。 


5.4 习题 


请 参考 课文 内 容 以 及 其 他 资料 ,完成 下 列 选择 题 。 
(1) 与 设计 软件 测试 用 例 无 关 的 文档 是 ( Fe 
A. 需求 规格 说 明 书 B. 详细 设计 说 明 书 
C. 可 行 性 研究 报告 D. 源 程序 
(2) 有 关 测 试 活动 的 描述 中 ,错误 的 是 ( Ji 
A. 测试 策划 中 的 活动 是 确定 测试 范围 ,测试 环境 和 制定 测试 计划 
B. 测试 用 例 设计 是 测试 设计 与 实现 的 主要 内 容 
C. 测试 执行 中 可 随时 修订 测试 计划 
D. 测试 总 结 的 目的 是 对 测试 结果 进行 分 析 ,以 确定 软件 产品 质量 的 当前 状态 
(3) 依据 GB/T15532 一 2008《 计 算 机 软件 测试 规范 ,软件 测试 应 由 相对 独立 的 人 员 
进行 。 测 试 团队 成 员 包含 的 工作 角色 有 ( Ns 
A. 测试 负责 人 ,测试 分 析 员 B. 测试 设计 员 ,测试 程序 员 ,测试 员 
C. 测试 系统 管理 员 、 配 置 管理 员 。 D. 以 上 全 部 
(4) 计算 机 软件 测试 规范 规定 ,软件 测试 的 类 别 可 分 为 单元 测试 .集成 测试 以 
及 ( Ns, 
A. 系统 测试 B. 验收 测试 
C. 系统 测试 和 验收 测试 D. 配置 项 测试 .系统 测试 和 验收 测试 
(5) 根据 GB/T15532 一 2008( 计 算 机 软件 测试 规范 》. 软 件 测试 管理 主要 包括 测试 过 
程 管理 ,测试 评审 管理 ,以 及 ( »s 
A. 测试 用 例 管理 B. 测试 环境 管理 
C. 配置 管理 D. 测试 系统 管理 
(6) 根据 GB/T15532 一 2008( 计 算 机 软件 测试 规范 》, 设 计 测 试用 例 应 遵循 : 基于 测 
试 需求 的 原则 .基于 测试 方法 的 原则 ,兼顾 测试 充分 性 和 效率 的 原则 ,以 及 ( hs 


A. 测试 用 例 无 元 余 性 原则 B. 测试 执行 可 重复 性 原则 

C. 测试 用 例 可 操作 性 原则 D. 测试 用 例 可 管理 性 原则 
(7) 与 设计 软件 测试 用 例 无 关 的 文档 是 ( 

A. 需求 规格 说 明 书 B. 详细 设计 说 明 书 

C. 可 行 性 研究 报告 D. 源 程 序 


(8) 下 面 有 关 软 件 测试 的 叙述 中 ,不 属于 H 模型 核心 思想 的 是 ( 站 
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A. 软件 测试 不 仅仅 指 测试 的 执行 ,还 包括 很 多 其 他 的 活动 
B. 软件 测试 是 一 个 独立 的 流程 ,贯穿 产品 整个 开发 周期 ,与 其 他 流程 并 发 地 
进行 
C. 软件 测试 要 尽早 准备 ,尽早 执行 
D. 软件 测试 不 同 层次 的 测试 活动 严格 按照 某 种 线性 次 序 执行 
(9) 下 列 有 关 测 试 过 程 抽象 模型 的 描述 中 ,正确 的 是 ( 
A. V 模型 中 ,单元 测试 验证 的 是 程序 编码 
B. W 模型 强调 ,测试 伴随 着 整个 软件 开发 周期 同步 进行 ,测试 的 对 象 是 程序 和 
设计 
C. H 模型 的 提出 源 自 软件 并 发 中 的 活动 常常 是 交叉 进行 的 ,存在 反复 触发 , 迁 
代 的 关系 
D. X 模型 提出 针对 完整 的 程序 进行 集成 的 编码 和 测试 
(10) 下 列 有 关 测 试 过 程 抽象 模型 的 描述 中 正确 的 是 ( ) 
A. V 模型 指出 ,软件 测试 要 尽早 准备 ,尽早 执行 ,只 要 某 个 测试 达到 了 准备 就 
绪 点 ,测试 执行 活动 就 可 开展 
B. W 模型 强调 ,测试 伴随 着 整个 软件 开发 周期 同步 进行 ,而 且 测试 的 对 象 不 仅 
仅 是 程序 需求 ,设计 也 同样 需要 测试 
C. H 模型 指出 ,单元 测试 和 集成 测试 应 检测 程序 的 执行 是 否 满足 软件 设计 的 


要 求 
D. X 模 型 提出 针对 完整 的 程序 进行 集成 的 编码 和 测试 
5.5 实验 与 思考 
5.5.1 实验 目的 


本 节 “ 实 验 与 思考 ”的 目的 : 

(1) 了 解 标准 化 的 意义 和 作用 ,了 解 支持 国家 标准 和 其 他 相关 标准 信息 的 专业 网 站 。 
(2) 熟悉 和 掌握 软件 测试 标准 化 的 概念 ,系统 了 解 与 软件 测试 相关 的 国家 标准 。 

(3) 通过 对 论述 题 的 深入 分 析 和 讨论 ,逐步 熟悉 和 掌握 软件 测试 的 基本 方法 。 


5.5.2 工具 /准备 工作 


在 开始 本 实验 之 前 ,请 认真 阅读 课程 的 相关 内 容 。 

请 收集 一 般 是 由 国家 质量 监督 检验 检疫 总 局 ( 即 原 国 家 技术 监督 局 ) 发 布 的 现行 的 软 
件 工程 和 软件 测试 国家 标准 。 

需要 准备 一 台 带 有 浏览 器 、 能 够 访问 因特网 的 计算 机 。 
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5.5.3 实验 内 容 与 步骤 


1) 标准 化 的 概念 。 


请 查阅 有 关 资 料 (例如 教材 和 专业 网 站 等 ) ,结合 自己 的 理解 回答 以 下 问题 : 


(1) 标准 一 般 分 哪 5 个 层次 ,并 做 简单 解释 。 


O 


© 


(2) 请 简单 解释 下 列 符号 的 含义 : 
GB: 


GJB: 


ISO: 


ANSI: 


IEEE: 


2) 与 软件 测试 活动 相关 的 国家 标准 。 


有 关 软 件 测试 活动 的 几 个 主要 的 国家 标准 简单 介绍 如 下 ,请 阅读 和 学 习 标 准 的 正式 


文本 并 记录 。 


(1) 计算 机 软件 文档 编制 规范 (GB/T8567 一 2008)。 


本 规范 是 一 份 指导 性 文件 。 本 规范 建议 ,在 一 项 计算 机 软件 的 开发 过 程 中 ,一 般 地 
说 ,应 该 产生 18 种 文件 ,本 规范 规定 了 这 18 个 软件 文件 的 编制 形式 ,并 提供 对 这 些 规定 
的 解释 。 同 时 ,本 规范 也 是 这 18 种 文件 的 编写 质量 的 检验 准则 。 


有 和 否 阅读 本 标准 正式 文本 : 口 已 阅读 
你 认为 本 标准 的 意义 何在 ? 为 什么 ? 


未 阅读 


(2) 计算 机 软件 测试 文档 编制 规范 (GB/T9386 一 2008) 。 
本 规范 规定 一 组 软件 测试 文件 。 文 件 中 所 规定 的 内 容 可 以 作为 对 测试 过 程 完备 性 的 
对 照 检查 表 , 故 采用 这 些 文件 将 会 提高 测试 过 程 的 每 个 阶段 的 能 见 度 , 提 高 测试 工作 的 可 


管理 性 。 
有 和 否 阅 读本 标准 正式 文本 : 口 已 阅读 
你 认为 本 标准 的 意义 何在 ? 为 什么 ? 


口 未 阅读 
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(3) 计算 机 软件 测试 规范 (GB/T15532 一 2008)。 
本 标准 规定 了 计算 机 软件 生命 周期 内 各 类 软件 产品 的 基本 测试 方法 、 过 程 和 准则 , 适 
用 于 计算 机 软件 生命 周期 全 过 程 和 计算 机 软件 的 开发 机 构 、 测 试 机 构 及 相关 人 员 。 
有 和 否 阅读 本 标准 正式 文本 口 已 阅读 未 阅读 
你 认为 本 标准 的 意义 何在 ? 为 什么 ? 


(4) 信息 技术 软件 包 质 量 要 求 和 测试 (GB/T17544 一 1998)。 

本 标准 规定 了 软件 产品 在 其 生存 周期 内 如 何 选择 适当 的 软件 可 靠 性 和 可 维护 性 管理 
要 素 ,并 指导 软件 可 靠 性 和 可 维护 性 大 纲 的 制定 和 实施 。 标 准 适 用 于 软件 产品 生存 周期 
的 各 个 阶段 。 

有 和 否 阅读 本 标准 正式 文本 : 口 已 阅读 未 阅读 

你 认为 本 标准 的 意义 何在 ? 为什么? 


(5) 其 他 。 

除了 上 面 这 些 标准 之 外 ,其 他 一 些 与 软件 工程 相关 的 国家 标准 如 : 

。 信息 处 理 系统 ”计算 机 系统 配置 图 符号 及 约定 (GB/T14085 一 1993)。 

。 计 算 机 软件 ”可 靠 性 和 可 维护 性 管理 (GB/T14394 一 1993)。 

。 软件 工程 ”产品 评价 (GB/T18905. 1 一 6 一 2002) 。 

。 信息 技术 ”软件 产品 评价 ”质量 特性 及 其 使 用 指南 (GB/T16260 一 1996)。 
。 信息 技术 CASE 工具 的 评价 与 选择 指南 (GB/T18234 一 2000) 。 


3) 请 对 测试 过 程 模型 中 的 V 模型 、W 模型 和 TMap 模型 进行 对 比分 析 , 讨 论 它们 各 
自 的 特点 。 


答 : 


4) 请 通过 网 络 文献 深入 了 解 “IBM Rational 统一 过 程 (RUP)”, 并 做 简单 描述 : 
答 ; 


请 分 析 ,IBM Rational 统一 过 程 (RUP) 对 软件 测试 会 产生 什么 影响 ? 
答 : 


5) 以 下 是 某 学 生 选 课 系 统 中 “学 生 查 询 成 绩 ” 交 互 行为 的 描述 ,请 按 要 求 回答 问题 。 
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交互 开始 时 终端 上 显示 首页 ,用 户 选择 “查询 ”请 求 后 显示 “请 输入 学 号 ”。 

在 用 户 输入 学 号 后 ,系统 核对 学 生 学 号 : 若 输 入 的 学 号 不 正确 , 则 显示 “输入 的 学 号 
不 正确 ”, 此 次 查询 取消 , 回 到 首页 ; 若 输 入 学 号 正确 ,出 现 “请 输入 课程 名 ”。 

一 旦 输入 课程 名 ,就 开始 核对 课程 名 称 : 若 输 入 的 课程 名 不 正确 , 则 显示 “输入 的 课 
程 名 不 正确 ”, 此 次 查询 取消 , 回 到 首页 ; 若 输 入 的 课程 名 正确 , 则 根据 * 学 号 "和 “课程 名 ”， 
查询 学 生成 绩 。 

若 查询 学 生成 绩 成 功 , 则 显示 查询 到 的 成 绩 , 系 统 询问 是 否 继续 查询 : 当 用 户 选择 
“继续 查询 "后 回 到 “请 输入 学 号 ”; 当 用 户 选择 “结束 查询 ”后 回 到 首页 。 

车 查询 学 生成 绩 失 效 , 则 显示 “查询 失效 ”后 回 到 首页 。 

答 : 

(1) 根据 系统 的 规格 说 明 ,请 在 一 白 纸 上 画 出 该 系统 以 上 交互 行为 的 状态 图 (应 满足 
功能 图 的 要 求 ,不 可 画 成 流程 图 ) ,并 粘贴 于 此 处 (相关 说 明 请 标注 于 图 上 )。 


一 站 巾 处 -一 一 一 一 一 
(2) 使 用 基本 路 径 测试 方法 确定 该 状态 图 的 测试 路 径 。 


答 : 
@ 根据 系统 的 规格 说 明 , 画 出 控制 流 图 ,并 粘贴 于 此 处 : 


名 由 控制 流 图 ,判定 该 程序 的 环 路 复杂 度 V(G) 是 : ， 
确定 的 独立 的 测试 路 径 是 : 


5.5.4 实验 总 结 


5.5.5 实验 评价 (教师 ) 
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5.6 阅读 与 分 析 : 软件 测试 文档 的 深度 与 广度 


测试 文档 是 测试 过 程 中 输出 的 测试 工作 产品 ,类 似 于 软件 工作 产品 。 然 而 实践 中 经 
常 面临 有 无 数 的 测试 文档 需要 撰写 ,而 使 用 文档 的 效果 却 是 非常 有 限 。 本 文 阑 述 了 测试 
文档 深度 与 广度 选择 时 需要 考虑 的 一 些 因素 。 

测试 文档 是 测试 人 员 在 测试 过 程 中 输出 的 测试 工作 产品 ,类 似 于 软件 工作 产品 ,是 形 
式 化 测试 过 程 的 重要 组 成 部 分 。IEEE 829 是 软件 测试 行业 内 最 有 名 的 文档 标准 , 它 提 供 
了 一 种 很 好 的 测试 文档 描述 ,同时 描述 了 测试 文档 之 间 以 及 与 测试 过 程 之 间 的 关系 。 

业内 不 少 公司 在 使 用 IEEE 829 测试 文档 标准 ,或 者 以 IEEE 829 为 基础 开发 自己 公 
司 的 文档 模板 ,但 是 实际 的 结果 并 不 乐观 ,主要 表现 在 : 

(1) 成 本 较 高 : 测试 人 员 需 要 花费 大 量 的 时 间 投 入 到 测试 文档 的 编写 ,按照 模板 填 
充 类 似 格 式 的 案头 工作 中 ; 

(2) 效果 较 差 : 按照 测试 文档 模板 编写 出 的 并 不 是 特别 有 价值 的 大 量 原始 材料 ,其 
至 由 于 时 间 的 限制 ,测试 文档 几乎 在 测试 过 程 中 没有 什么 人 看 ; 

(3) 文档 维护 成 本 高 : 特别 是 在 测试 文档 的 输入 软件 工作 产品 变更 的 时 候 ,不 仅 要 
修改 捆绑 到 软件 变更 部 分 ,而 且 还 要 搜索 必须 修改 的 其 他 有 关联 的 内 容 。 

因此 ,纯粹 照搬 使 用 IEEE 829 测试 文档 模板 ,或 者 公司 内 部 开发 的 文档 模板 并 不 是 
提供 测试 文档 的 初衷 。 为 了 提高 测试 文档 模板 的 效率 和 有 效 性 ,测试 人 员 需 要 考虑 测试 
文档 需要 解决 什么 问题 , 它 的 主要 目的 是 什么 。 假 如 希望 编写 出 好 的 测试 文档 ,需要 有 测 
试 文档 模板 的 支持 ,而 更 重要 的 是 测试 人 员 需 要 了 解 模板 每 部 分 的 含义 ,为 什么 需要 有 这 
部 分 ,什么 时 候 可 以 删除 这 部 分 内 容 , 即 测试 人 员 必 须 能 够 根据 公司 特征 和 项 目 特 点 合理 
裁剪 测试 文档 模板 。 

决定 什么 内 容 包 含 到 测试 文档 中 ,什么 内 容 不 包含 ,应 该 以 项 目 需求 为 基础 。 为 了 更 
好 地 确定 测试 文档 模板 的 深度 与 广度 , 即 合理 裁剪 测试 文档 模板 ,测试 人 员 至 少 需要 考虑 
下 面 的 这 些 因 素 : 

(1) 测试 目标 。 测 试 人 员 测 试 该 产品 或 者 系统 的 目标 是 什么 。 假 如 测试 文档 不 能 支 
持 这 个 目标 ,或 者 无 助 于 达到 这 个 目标 ,那么 这 样 的 测试 文档 (与 所 创建 的 所 有 其 他 软件 
工作 产品 一 样 ) 价 值 就 会 降低 很 多 。 

(2) 测试 文档 是 产品 还 是 工具 。 假 如 测试 文档 是 软件 系统 或 者 产品 的 一 部 分 ,那么 
这 些 文档 是 需要 发 布 给 客户 使 用 的 ,这 时 候 测 试 文档 就 需要 按照 客户 的 要 求 遵循 某 种 标 
准 。 而 假如 测试 文档 只 是 内 部 使 用 的 工具 ,那么 就 不 必 太 完整 , 太 整 齐 ,能 够 在 最 低 限 度 
上 有 助 于 达到 目标 即 可 。 

(3) 软件 设计 变更 是 否 频繁 。 如 果 软 件 设 计 变 更 很 频繁 , 则 不 要 将 许多 细节 写 入 测 
试 文档 中 ,因为 这 些 细节 很 快 就 会 过 时 。 这 种 情况 下 ,不 要 编写 大 量 的 测试 文档 ,它们 被 
修改 或 者 放弃 的 速度 太 快 ,不 值得 在 测试 文档 上 投入 太 多 。 

(4) 采用 的 测试 方法 。 假 如 目前 采用 的 软件 开发 模型 是 V 模型 之 类 的 线性 模型 , 那 
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么 采用 的 测试 方法 通常 是 依赖 于 预先 定义 的 测试 ,这 时 候 需 要 详细 的 测试 用 例 的 操作 和 
维护 文档 。 假 如 采用 的 是 探索 性 测试 , 则 更 需要 策略 方面 的 文档 ,例如 : 关于 某 个 测试 领 
域 的 想法 ,但 不 是 具体 的 测试 用 例 。 

(5) 测试 文档 给 谁 看 。 假 如 测试 文档 是 主要 给 新 的 测试 人 员 或 者 没有 经 验 的 测试 人 
员 看 ,那么 需要 足够 详细 使 得 他 们 能 够 正常 开展 工作 。 

测试 人 员 在 裁剪 测试 文档 的 时 候 , 上 面 的 这 些 问 题 可 以 帮助 测试 人 员 思 考 , 写 出 他 们 
所 需要 的 东西 ,以 及 内 容 的 详细 程度 ,以 达到 测试 文档 的 目标 。 

资料 来 源 : 2012-2-28 11:22,swtbok,51Testing 软件 测试 网 采编 。 
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第 6 章 测试 传统 应 用 系统 


软件 测试 工作 的 目标 是 尽 可 能 多 地 暴露 软件 中 的 潜在 错误 ,能 暴露 更 多 潜在 错误 的 
测试 用 例 , 便 是 成 功 的 (或 者 说 好 的 、 高 产 的 ) 测 试用 例 。 人 们 希望 用 最 小 的 测试 用 例 集 
合 ,得 到 最 大 的 测试 彻底 度 ( 覆 盖 率 ) 。 因 此 ,如 何 设计 好 的 测试 用 例 与 如 何 衡量 彻底 度 ， 
便 成 为 测试 工作 的 两 个 关键 的 技术 问题 。 为 此 ,必须 依赖 有 效 的 软件 测试 方法 。 本 章 主 
要 讨论 传统 应 用 系统 的 测试 方法 ,测试 面向 对 象 应 用 系统 和 测试 Web 应 用 系统 将 分 别 在 
第 11 和 第 12 章 介绍 。 


6.1 静态 测试 与 动态 测试 


按 测 试 过 程 是 否 在 实际 应 用 环境 中 运行 来 分 类 ,可 以 将 测试 技术 分 成 静态 测试 和 动 
态 测 试 。 


6.1.1 静态 测试 技术 


静态 测试 技术 是 单元 测试 中 的 重要 手段 之 一 ,测试 对 象 可 以 是 需求 文件 .设计 文件 或 
源 程 序 等 ,适用 于 新 开发 的 和 重用 的 代码 ,通常 在 代码 完成 并 无 错误 地 通过 编译 或 汇编 后 
进行 。 静 态 测试 采用 工具 扫描 分 析 \ 代 码 评审 等 方法 ,测试 人 员 主 要 由 软件 开发 小 组 的 成 
员 组 成 。 

静态 测试 时 不 执行 被 分 析 的 程序 ,而 是 通过 对 模块 源 代码 进行 研读 , 找 出 其 中 的 错误 
或 可 疑 之 处 ,收集 一 些 度 量 数据 。 静 态 测试 包括 对 软件 产品 的 需求 和 设计 规格 说 明 书 的 
评审 、 对 程序 代码 的 复审 等 。 静 态 测试 的 查 错 和 分 析 功 能 是 其 他 方法 所 不 能 蔡 代 的 ,可 以 
采用 人 工 或 者 计算 机 辅助 静态 测试 手段 进行 检测 。 

。 人工 检测 : 是 指 完全 靠 人 工 审查 或 评审 软件 ,偏重 于 编码 风格 、 质 量 的 检验 。 除 
了 审查 编码 ,还 要 对 各 阶段 的 软件 产品 进行 检验 。 这 种 方法 可 以 有 效 地 发 现 逻 辑 
设计 和 编码 错误 ,发 现 计算 机 辅助 静态 测试 所 不 易 发 现 的 问题 。 
计算 机 辅助 静态 测试 : 利用 静态 测试 工具 对 被 测 程序 进行 特性 分 析 , 从 程序 中 提 
取 一 些 信息 ,以 便 检 查 程序 逻辑 的 各 种 缺陷 和 可 疑 的 程序 构造 ,如 用 错 的 局 部 变 
量 和 全 局 变量 ,不 匹配 的 参数 ,潜在 的 死 循 环 等 。 静 态 测试 中 还 可 以 用 符号 代替 
数值 求 得 程序 结果 ,以 便 对 程序 进行 运算 规律 的 检验 。 


1. 代码 审查 
代码 审查 是 一 种 有 效 的 测试 方法 ,我 们 在 本 书 的 第 3 章 中 做 了 介绍 。 据 统计 ,代码 中 
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60%% 以 上 的 缺陷 可 以 通过 代码 审查 (包括 互 查 , 走 查 、 会 议 评 审 等 形式 ) 发 现 。 代 码 审查 还 
为 缺陷 预防 获取 各 种 经 验 ,为 改善 代码 质量 打下 坚实 基础 。 在 代码 审查 过 程 中 获得 的 主 
要 经 验 是 : 

。 合适 的 检查 速度 为 一 次 检查 大 约 200 一 400 行 代码 ,不宜 超过 60 一 90 分 钟 。 

。 在 审查 前 ,代码 作者 应 该 对 代码 进行 注释 。 

。 建立 量化 的 目标 并 获得 相关 的 指标 数据 ,从 而 不 断 改进 流程 。 

。 使 用 检查 表 肯 定 能 提高 评审 效果 。 


2. 流 图 分 析 


流 图 分 析 是 通过 分 析 程 序 的 流程 图 来 实现 的 , 它 只 分 析 代 码 的 结构 而 不 执行 代码 , 因 
此 , 流 图 分 析 法 比较 适合 于 编码 实现 阶段 。 流 图 分 析 所 能 获得 的 信息 主要 有 
每 个 语句 中 标识 符 的 引用 分 析 , 如 变量 .参数 等 。 
每 个 例 行 程序 调用 的 子 程序 和 函数 。 
未 给 出 初 值 的 变量 。 
已 定义 但 未 使 用 的 变量 。 
未 经 说 明 或 无 用 的 标号 。 
对 任何 一 组 输入 数据 均 不 可 能 执行 到 的 代码 段 。 

流 图 分 析 比 较 直 观 ,能 为 动态 测试 产生 测试 数据 ,并 显示 各 种 测试 数据 的 执行 路 径 ， 
便于 分 析 测 试 结果 。 

3. 符号 执行 

这 是 一 种 符号 化 定义 数据 的 方法 , 它 要 为 每 条 程序 路 径 给 出 一 个 符号 表达 式 。 这 种 
方法 不 使 用 实际 的 数据 值 来 执行 程序 ,而 是 对 程序 中 的 特定 路 径 输 入 一 些 符号 ,在 对 这 些 
符号 进行 处 理 后 ,根据 输出 的 符号 来 判断 程序 的 行为 和 正确 性 。 符 号 执行 可 利用 符号 执 
行 树 等 工具 来 完成 。 

符号 执行 方法 中 的 输出 可 以 表示 成 输入 符号 的 公式 ,所 以 能 较 容易 地 判断 程序 是 否 
是 计算 的 某 一 特定 函数 。 但 这 种 方法 代价 高 ,符号 处 理 比 数值 计算 复杂 得 多 , 且 容 易 出 
错 ,不 适用 于 非 数值 计算 的 程序 。 


6.1.2 动态 测试 技术 


动态 测试 是 软件 测试 中 使 用 最 为 普遍 的 方法 ,通过 运行 程序 发 现 错误 ,通过 观察 代码 
运行 过 程 来 获取 系统 行为 .变量 实时 结果 、 内 存 、 堆 栈 、 线 程 以 及 测试 覆盖 率 等 各 方面 的 信 
息 , 从 而 判断 系统 是 否 存在 问题 ,或 者 通过 有 效 的 测试 用 例 、 对 应 的 输入 输出 关系 来 分 析 
被 测 程序 的 运行 情况 ,从 中 发 现 缺 陷 。 

可 以 把 程序 看 成 是 一 个 函数 , 它 描述 了 输入 和 输出 之 间 的 关系 。 输 入 的 全 体 叫 程序 
的 定义 域 ,输出 的 全 体 叫 程序 的 值 域 。 一 个 动态 测试 过 程 可 分 为 5 步 : 
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(1) 选取 在 定义 域 中 的 有 效 值 或 定义 域外 的 无 效 值 。 

(2) 对 已 选 的 值 决 定 其 预期 的 结果 。 

(3) 用 选取 的 值 执 行程 序 。 

(4) 观察 程序 的 行为 ,并 获取 其 结果 。 

(5) 将 结果 与 预期 的 结果 相对 比 ,如 果 不 吻合 , 则 证 明 程 序 存 在 错误 。 

可 以 通过 定义 域 中 的 每 个 元 素 执行 上 述 测试 过 程 ,从 而 证 明 程 序 有 无 错误 ,这 就 
是 “穷尽 测试 (又 称 穷 举 测试 )”。 但 是 ,实际 使 用 的 测试 方法 只 能 是 一 种 抽样 检查 
以 便 把 几乎 无 穷 的 穷尽 测试 变 成 一 个 可 行 的 测试 过 程 。 为 此 , 先 要 寻找 一 个 合适 的 
定义 域 中 具有 代表 的 元 一 一 测试 数据 集 , 并 且 已 经 证 明 并 不 存在 寻找 测试 数据 集 的 
标准 算法 。 

在 动态 测试 过 程 中 还 应 该 注意 ,如 果 程 序 中 的 某 一 段 发 现 了 较 多 的 错误 , 则 进一步 测 
试 时 应 特别 注意 这 一 段 。 

按 产生 测试 数据 的 不 同方 式 ,动态 测试 可 分 为 功能 测试 和 结构 测试 。 功 能 测试 又 叫 
“ 黑 盒 测试 ”, 它 从 系统 的 需求 分 析 说 明 书 出 发 , 按 程序 的 输入 、 输 出 特性 和 类 型 选择 测试 
数据 。 结 构 测 试 又 叫 * 白 盒 测试 ”, 测 试 数据 的 产生 涉及 程序 的 具体 结构 ,所 以 它 应 反映 程 
序 的 结构 性 质 。 壁 如 : 产生 的 测试 数据 应 使 程序 的 所 有 语句 至 少 执行 一 次 ;或 使 程序 的 
所 有 通路 至 少 通过 一 次 , 亦 即 使 程序 的 每 个 分 支 至 少 通过 一 次 。 

此 外 ,还 有 接口 测试 ,包括 测试 数据 接口 和 控制 接口 。 测 试 数据 接口 主要 是 测试 例 行 
程序 或 模块 间 数 据 传递 的 正确 性 ;测试 控制 接口 主要 是 测试 例 行 程序 或 模块 间 调 用 关系 
的 正确 性 。 


6.1.3 分 析 方 法 和 非 分 析 方 法 


测试 方法 可 以 分 为 分 析 方 法 和 非 分 析 方 法 两 种 。 

测试 的 分 析 方 法 是 通过 分 析 程 序 的 内 部 逻辑 来 设计 测试 用 例 , 它 适用 于 设计 阶段 对 
软件 详细 设计 表示 的 测试 ,包括 白 盒 方法 和 静态 测试 两 种 。 

测试 的 非 分 析 方 法 也 称 黑 盒 方法 , 它 是 根据 程序 的 功能 来 设计 测试 用 例 , 适 用 于 需求 
分 析 阶 段 对 软件 需求 说 明 书 的 测试 。 


6.1.4 主动 测试 和 被 动 测试 


在 软件 测试 中 ,比较 常见 的 是 主动 测试 方法 ,测试 人 员 主 动向 被 测试 对 象 发 送 请 求 ， 
或 借助 数据 、 事 件 驱动 被 测试 对 象 的 行为 ,来 验证 被 测试 对 象 的 反应 或 输出 结果 。 在 主动 
测试 中 ,测试 人 员 和 被 测试 对 象 之 间 发 生 直接 相互 作用 ,而 且 被 测试 对 象 完全 受 测试 人 员 
的 控制 ,被 测试 对 象 处 于 测试 状态 ,而 不 是 实际 工作 状态 ,如 图 6-1(a) 所 示 。 

由 于 主动 测试 中 被 测试 对 象 受 人 为 因素 影响 较 大 ,而且 一 般 是 在 测试 环境 中 进行 ， 
而 非 软 件 产 品 的 实际 运行 环境 ,所 以 主动 测试 不 适应 产品 在 线 测试 。 为 了 解决 产品 在 
线 测试 ,这 就 需要 用 到 被 动 测试 。 在 被 动 测试 方法 中 .软件 产品 在 实际 环境 中 运行 , 测 
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被 测试 对 象 
测试 人 员 发 送 | 上 接 MKxmm 应 
发 送 接收 /检查 运行 环境 
接收 发 送 /响应 接收 /监控 
被 测试 对 象 测试 人 员 
(a) 主动 测试 (b) 被 动 测试 


图 6-1 主动 测试 和 被 动 测 试 


试 人 员 被 动 地 监控 产品 的 运行 ,通过 一 定 的 机 制 来 获得 系统 运行 的 数据 ,包括 输入 、 输 
出 数据 ,如 图 6-1(b) 所 示 。 被 动 测试 适合 性 能 测试 和 在 线 监控 ,在 罕 入 式 系 统 测试 中 
常常 采用 被 动 测试 方法 。 另 外 ,大 规模 复杂 系统 的 性 能 测试 ,为 了 节省 成 本 ,可 以 采用 
这 种 方法 。 

在 主动 测试 中 ,测试 人 员 需 要 设计 测试 用 例 、 设 法 输入 各 种 数据 ;而 在 被 动 测试 中 , 系 
统 运行 过 程 中 的 各 种 数据 自然 产生 ,测试 人 员 不 需要 设计 测试 用 例 , 只 要 设法 获得 系统 运 
行 的 各 种 数据 ,但 数据 的 完整 性 得 不 到 保证 。 被 动 测试 的 关键 是 建立 监控 程序 (代理 ) ,并 
通过 数据 分 析 掌 握 系统 的 状态 。 


6.2 白 愈 测试 方法 


所 谓 白 盒 方 法 ,就 是 能 够 看 清楚 (透明 ) 事 物 的 内 部 ,通过 剖析 事物 的 内 部 结构 和 运行 
机 制 来 处 理 和 解决 问题 。 如 果 没 有 办 法 或 不 去 了 解 事物 的 内 部 结构 和 运行 机 制 , 而 把 整 
个 事物 看 成 是 一 个 整体 一 一 黑 盒子 ,通过 分 析 事 物 的 输入 ,输出 以 及 周边 条 件 来 分 析 和 处 
理 问题 ,这 种 方法 就 是 黑 盒 方法 。 

在 软件 测试 中 ,根据 是 针对 软件 系统 的 内 部 结构 ,还 是 针对 软件 系统 的 外 部 表现 行为 
来 采取 不 同 的 测试 方法 ,分 别称 为 白 盒 测试 方法 和 黑 盒 测 试 方法 。 
白 盒 测试 ,也 称 结构 测试 或 逻辑 驱动 测试 ,是 已 知 产品 的 内 部 工作 过 程 ,清楚 最 终生 
成 软件 产品 的 计算 机 程序 结构 及 其 语句 ,按照 程序 的 内 部 结构 来 测试 程序 ,测试 程序 内 部 
的 变量 状态 、 逻 辑 结构 、 运 行路 径 等 ,检验 程序 中 的 每 条 通路 是 否 都 能 按 预定 要 求 正确 工 
作 , 检 查 程序 内 部 动作 或 运行 是 否 符合 设计 规格 要 求 ,所 有 内 部 成 分 是 否 按 规定 正常 
进行 。 
白 盒 测 试 是 基于 覆盖 的 测试 , 即 尽 可 能 覆盖 程序 的 结构 特性 和 逮 辑 路 径 , 其 具体 方法 
有 逮 辑 槛 盖 、 循 环 覆 盖 .基本 路 径 覆 盖 等 。 逻辑 覆盖 又 可 进一步 分 为 语句 覆盖 、 判 定 覆 盖 、 
条 件 覆 盖 、 判 定 /条 件 覆 盖 、 条 件 组 合 覆 盖 等 。 
白 盒 测试 主要 用 于 单元 测试 ,其 基本 原则 有 : 
。 保证 每 个 模块 中 所 有 独立 路 径 至 少 被 使 用 一 次 。 
。 完成 所 有 逻辑 值 分 别 为 真 值 (true) 和 假 值 (false) 的 条 件 下 的 测试 。 
。 在 上 、 下 边界 及 可 操作 范围 内 运行 所 有 循环 ,完成 循环 覆盖 测试 。 
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。 检查 内 部 数据 结构 以 确保 其 有 效 性 ,完成 边界 条 件 的 测试 。 
白 盒 测试 法 试图 穷 举 路 径 测试 ,但 这 几乎 是 不 可 能 的 ,因为 贯穿 一 定 规模 系统 的 程序 
的 独立 路 径 数 可 能 是 一 个 天 文 数字 。 企 图 遍历 所 有 的 路 径 很 难 做 到 ,即使 每 条 路 径 都 测 
试 了 ,覆盖 率 达 到 100% ,程序 仍 可 能 出 错 ,因为 : 

。 穷 举 路 径 测试 不 能 查 出 程序 违反 了 设计 规范 , 即 程序 在 实现 一 个 不 是 用 户 需 要 的 

功能 。 
。 穷 举 路 径 测试 不 可 能 查 出 程序 中 因 遗 漏 路 径 而 出 的 错误 。 
。 穷 举 路 径 测试 可 能 发 现 不 了 一 些 与 数据 相关 的 异常 错误 。 


6.2.1 语句 覆盖 


语句 覆盖 法 的 基本 思想 是 设计 若干 测试 用 例 ,运行 被 测 程序 ,使 程序 中 的 每 个 可 执行 
语句 至 少 被 执行 一 次 。 
例如 : 示例 源 程序 如 下 : 


Dim a, b Rs Integer 

Dim c As Double 

If (a> 0 AND b> 0) Then 
Cc/a 

End If 

If (a>1 0 oc1) Then 
Cct1l 

End If 

cbtc 


该 程序 流程 图 如 图 6-2(a) 所 示 ,并 可 以 简化 为 流程 图 6-2(b)。 其 中 : 


条 件 M {a> 0 and b> 0} 
条 件 二 {a>1or c>1} 


(9) 流程 图 A 人 b) 流程 图 B 
6-2 ”例题 流程 图 


由 流程 图 B 可 以 知道 ,该 程序 模块 有 4 条 不 同 的 路 径 : 


Fl: (1-2-4) 即 计 .xT. 且 于 .1. 
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P2: (I-25) 即 M .T. 且 FE -F- 
E3: (3-4) 即 人 E .F- 且 FE .7- 
P4: (-3-5) 即 ME .F. 且 FE -F- 


P1 包含 了 所 有 可 执行 语句 ,按照 语句 履 盖 的 测试 用 例 设计 原则 ,可 以 使 用 Pl 作为 测 
试用 例 。 令 a 二 2, b 一 1，c 一 6, 会 得 到 输出 { a 二 2, b 一 1,，c 一 5 } ,此 时 满足 条 件 M{a>0 
and b>0} 和 条 件 N {a>1orc> 二 1}》 ,这样 , 测 试用 例 的 输入 { a 二 2, b 二 1, c=6 } 覆 
盖 路 径 P1 。 

在 使 用 语句 覆盖 法 设计 测试 用 例 时 ,能够 使 所 有 的 执行 语句 都 被 测试 ,但 是 不 能 准确 
地 判断 运算 中 的 逻辑 关系 错误 。 在 这 个 例子 里 面 ,如 果 M 的 条 件 是 a 二 0 orb > 0, 而 
不 是 and 关系 ,这 时 的 测试 用 例 仍然 可 以 覆盖 所 有 可 执行 语句 ,但 不 能 发 现 其 中 的 逻辑 
错误 。 

即 : 

If (a> 0 or b> 0) Then " 屁 误 咀 测 试 结果 相同 " 


6.2.2 判定 覆盖 


判定 覆盖 法 的 基本 思想 是 : 设计 若干 用 例 ,运行 被 测 程序 ,使 得 程序 中 每 个 判断 的 取 
真 分 支 和 取 假 分 支 至 少 经 历 一 次 , 即 判断 真 、 假 值 均 被 满足 。 一 个 判定 往往 代表 着 程序 的 
一 个 分 支 ,所 以 判定 履 盖 也 被 称 为 分 支 获 盖 。 按 照 判 定 获 盖 的 基本 思路 ,可 以 这 样 针 对 上 
面 提 到 的 测试 的 用 例 进行 设计 ,Pl 和 P4 作为 测试 用 例 ,如 表 6-1 所 示 。 


表 6-1 判定 覆盖 的 测试 用 例 


测试 用 例 取 值 条 件 判定 条 件 通过 路 径 
输入 : {a=2, b=1, c= 二 6} MW 
输出 ; {a=2, b==1, c 二 5} a>0, b>0, a>1, c>1 N= . 工 P1(1-2-4) 
输入 ; {a= 一 2, b=1, c= 一 6} 到 于 M= ,PF. i 
输出 (02 bl cm_5) | <0 b>0 a<=l ec=1 NE 二 P4(1-3-5) 


。 设计 输入 ,使 测试 可 以 覆盖 路 径 P1, 即 M {a>0 and b>0) 和 条 件 N {a>1 or c> 
1} 都 成 立 。 
。 设计 输入 ,使 测试 可 以 覆盖 路 径 P4, 即 M {a 二 0 and b>0} 和 条 件 N {a>1 or c> 
1) 都 不 成 立 。 
判定 覆盖 设计 测试 用 例 时 会 忽略 条 件 中 取 “ 或 (or)” 的 情况 ,例如 ,在 上 面 的 例子 中 ， 
如 果 条 件 N 中 是 c=1 而 不 是 ec 二 1, 同 样 能 得 到 相同 的 测试 结果 。 
即 : 


If (a>1or c<l) Then 噬 误 但 测试 结果 相同 " 
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6.2.3 ”条件 覆盖 


条 件 覆 盖 的 基本 思想 是 : 设计 若干 测试 用 例 ,执行 被 测 程序 以 后 ,要 使 每 个 判断 中 每 
个 条 件 的 可 能 取 值 至 少 满足 一 次 。 对 于 第 一 个 判定 条 件 M, 可 以 分 割 如 下 : 

。 条 件 a 二 0: 取 真 (True) 时 为 T1, 取 假 (False) 时 为 Fl1; 

。 条 件 b>0: 取 真 (True) 时 为 T2, 取 假 (False) 时 为 F2。 

对 于 第 二 个 判定 条 件 N: 

。 条 件 a 二 1: 取 真 CTrue) 时 为 T3, 取 假 (False) 时 为 F3; 

。 条 件 c>1: 取 真 (True) 时 为 T4, 取 假 (False) 时 为 F4。 

根据 条 件 覆 盖 的 基本 思想 ,要 分 别 获 得 8 个 条 件 取 值 ,组 合成 测试 用 例 , 如 表 6-2 
所 示 。 

表 6-2 条 件 覆盖 的 测试 用 例 
测试 用 例 取 值 条 件 具体 取 值 通过 路 径 


输入 : {a=2, b= 一 1, c= 一 2} 
输出 :; {a=2, b= 一 1, c= 一 5} 


Tl1, F2, T3, F4 a>0, b<=0, a>1, c<=1 P3(1-3-4) 


输入 : {a= 一 1, b=2, c=3} 


F1, T2, F3, T4 | a<=0, b>0, a<=1, c>1 | P3(1-3-4 
输出 : {a= 一 1, b=2, c=6} 和 人 


保证 每 个 条 件 的 取 真 、 取 假 都 被 至 少 运行 一 次 的 测试 用 例 设计 可 能 还 有 好 几 种 ,而 这 
两 个 用 例 条 件 取 值 不 同 , 却 覆 盖 了 相同 的 路 径 。 可 以 看 到 ,在 这 种 测试 用 例 设计 方法 中 ， 
测试 用 例 没 有 满足 前 面 提 到 的 判定 获 盖 的 要 求 , 即 判定 条 件 M 和 N 的 真 、 假 没有 至 少 被 
执行 一 次 ,而 是 M 总 是 取 假 ,.N 总 是 取 真 ,这 样 , 测 试 可 能 会 遗漏 程序 馆 辑 错误 。 所 以 说 ， 
所 有 条 件 覆 盖 都 满足 了 ,也 不 能 保证 所 有 判定 (分 支 ) 覆 盖 被 测试 ,为 此 需要 引入 判定 -条 
件 获 盖 , 使 测试 更 充分 。 


6.2.4 ”判定 -条 件 覆 盖 


判定 -条 件 覆 盖 实 际 上 是 将 判定 覆盖 和 条 件 覆 盖 结 合 起 来 的 一 种 设计 方法 , 即 : 设计 
足够 的 测试 用 例 ,使 得 判断 条 件 中 的 所 有 条 件 可 能 取 值 至 少 执行 一 次 ,同时 ,所 有 判断 的 
可 能 结果 至 少 执行 一 次 。 按 照 这 种 思想 ,在 前 面 的 例子 中 应 该 至 少 保证 判定 条 件 M 和 N 
取 真 和 取 假 各 一 次 ,同时 要 保证 8 个 条 件 取 值 (T1, F1, T2, F2, …',F4) 也 至 少 被 执行 一 
次 ,如 表 6-3 所 示 。 


表 6-3 ”判定 -条 件 覆 盖 的 测试 用 例 


测试 用 例 取 值 条 件 具体 取 值 判定 条 件 | 通过 路 径 
输入 :{a=2, b 一 1，c 一 6} a>0, b>0, M= .T. 
输出 , {a 一 2, b 二 1, ce 一 5} dl N= bs | 
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续 表 
测试 用 例 取 值 条 件 具体 取 值 判定 条 件 | 通过 路 径 
输入 :{a 一 一 1, b 一 一 2，c 一 一 3} a<=0, b<=0, M= .F. 
输 膨 ia 三 三 机 让 的 | 间作 cyl N= | 


这 样 设计 测试 用 例 ,依然 可 能 会 忽视 代码 中 出 现 的 错误 。 如 表 6-3 的 第 2 个 测试 用 
例 和 表 6-1 的 第 2 个 测试 用 例 取 值 有 差异 (一 个 是 b>0 ,一 个 是 b 生 =0) ,但 通过 的 路 径 
是 一 样 的 ,都 是 P4, 而 另外 两 条 路 径 (P2、P3) 没 有 被 获 盖 。 这 时 ,如 果 条 件 N 中 的 c 一 1 
被 错误 写成 之 1, 还 是 发 现 不 了 。 为 了 使 程序 得 到 足够 的 测试 ,不 仅 每 个 条 件 被 测试 ,而 
且 每 个 条 件 的 组 合 也 应 该 被 覆盖 。 


6.2.5 条 件 组 合 覆盖 


条 件 组 合 获 盖 的 基本 思想 是 : 设计 足够 的 测试 用 例 , 使 得 判断 中 每 个 条 件 的 所 有 可 
能 至 少 出 现 一 次 ,并 且 每 个 判断 本 身 的 判定 结果 也 至 少 出 现 一 次 。 它 与 条 件 获 盖 的 差别 
是 : 它 不 是 简单 地 要 求 每 个 条 件 都 出 现 “ 真 ”与 “ 假 " 两 种 结果 ,而 是 要 求 让 这 些 结果 的 所 
有 可 能 组 合 都 至 少 出 现 一 次 。 

按照 条 件 组 合 覆 盖 的 基本 思想 ,对 于 前 面 的 例子 ,设计 组 合 条 件 如 表 6-4 所 示 。 


表 6-4 示例 的 8 种 组 合 条 件 


编 号 覆盖 条 件 取 值 判定 -条 件 取 值 判定 -条 件 组 合 
1 Ti, T2 M= .T. a>>0, b>0, M 取 真 
2 T1, F2 M= .F. a>>0, b 二 =0, M 取 假 
3 Fl, T2 M= .F. a 一 一 0. b>0，M 取 假 
4 F1，F2 M= .F. a 三 二 0, b 一 =0，M 取 假 
5 T3, T4 N= .T. a>1, c>1, N 取 真 
6 T3, F4 N= .T. a>1, c<=1, N 取 真 
7 F3, T4 N= .T. a 三 =1, c>1, N 取 真 
8 F3, F4 N= .F. a 一 一 1，c 一 一 1, N 取 假 


针对 8 种 组 合 条 件 , 再 来 设计 能 覆盖 所 有 这 些 组 合 的 测试 用 例 , 如 表 6-5 所 示 。 从 中 
可 以 看 出 ,事实 上 ,条 件 组 合 覆 盖 是 将 蓝 盖 条 件 组 合成 满足 条 件 的 判定 条 件 , 同 时 保证 判 
定 条 件 的 所 有 取 值 至 少 执行 一 次 。 
表 6-5 条 件 组 合 覆盖 的 测试 用 例 
测试 用 例 覆盖 条 件 覆盖 路 径 材 盖 组 合 


输入 :{a=2, b=1, c= 二 6} 
输出 :{a=2, b=1, c= 二 5) 
输入 :{a 一 2，b 一 一 1，c 一 一 2} 
输出 :{a 一 2，b 一 一 1，c 一 一 2} 


T1，T2，T3，T4 P1(1-2-4) 1,5 


Tl1, F2, T3, F4 P3(1-3-4) 2,6 
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测试 用 例 覆盖 条 件 覆盖 路 径 覆盖 组 合 


输入 :{a= 一 1, b=2, c= 二 3} 
输出 :{a 一 一 1，b 一 2，c 一 6} 
输入 :{a= 一 1, b= 一 2, c= 一 3} 
输出 ;{a= 一 1, b= 一 2, c= 一 5} 


Fl, T2, F3, T4 P3(1-3-4) 3,7 


Fl, F2, F3, F4 P4(1-3-5) 4,8 


条 件 组 合 获 盖 设计 方法 也 有 缺陷 ,从 上 面 的 测试 用 例 中 可 以 看 到 ,所 有 的 条 件 获 盖 组 
合 不 能 保证 所 有 的 路 径 被 执行 , 即 P2(1-2-5) 没有 被 执行 。 所 以 ,更 理想 的 测试 用 例 ,不 
仅 能 覆盖 各 个 条 件 和 各 个 判定 ,而 且 还 能 覆盖 基本 路 径 。 


6.2.6 路径 覆 盖 


顾名思义 ,路 径 覆 盖 就 是 设计 测试 用 例 来 覆盖 程序 中 的 所 有 可 能 的 执行 路 径 。 调整 
表 6-5 中 第 2 个 测试 用 例 , 即 设计 出 测试 用 例 覆 盖 路 径 P2(1-2-5) ,而 不 是 P3(1-3-4) ,这 
样 就 可 以 完全 覆盖 路 径 Pl1、P2、P3 和 P4, 如 表 6-6 所 示 。 


表 6-6 路 径 覆盖 的 测试 用 例 


测试 用 例 覆盖 条 件 覆盖 路 径 覆盖 组 合 
le pe TIT Tay P1(1-2-4) 1,5 
pe pi 二 Tl1, T2, F3, F4 P3(1-2-4) 1,8 
et al 人 2 Fl, T2, F3, T4 P301-3-4) 9 
nh f= == Fl, F2, F3, F4 P4(1-3-5) 4,8 


但 是 ,路 径 获 盖 法 没有 涵盖 所 有 的 条 件 组 合 (如 组 合 2、6)。 

可 见 ,采用 其 中 任何 一 种 方法 都 不 能 完全 覆盖 所 有 的 测试 用 例 。 因 此 ,在 实际 的 测试 
用 例 设计 过 程 中 ,可 以 根据 需要 和 不 同 的 测试 用 例 设 计 特 征 ,将 不 同 的 设计 方法 组 合 起 
来 ,交叉 使 用 ,以 达到 最 高 的 覆盖 率 。 

采用 条 件 组 合 和 路 径 覆 盖 两 种 方法 的 结合 来 重新 设计 测试 用 例 , 如 表 6-7 所 示 ,也 就 
是 在 表 6-5 或 表 6-6 的 基础 上 增加 一 个 用 例 , 通 过 这 5 个 测试 用 例 就 能 覆盖 各 种 情况 , 包 
括 条 件 、 判 定 -条 件 、 条 件 组 合 、 路 径 等 ,使 程序 得 到 完全 的 测试 。 

路 径 获 盖 中 还 有 一 个 基本 路 径 测试 法 , 它 是 在 程序 控制 流 图 的 基础 上 ,通过 分 析 控 制 
构造 的 环 路 复杂 性 ,导出 基本 可 执行 路 径 集合 ,从 而 设计 测试 用 例 的 方法 。 设 计 出 的 测试 
用 例 要 保证 被 测试 程序 的 每 个 可 执行 语句 至 少 被 执行 一 次 。 
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表 6-7 完全 覆盖 的 测试 用 例 


测试 用 例 覆盖 条 件 覆盖 路 径 覆盖 组 合 
0 人 2 Tl 2 Te P1(1-2-4) 1,5 
0 2 T1, T2, F3, F4 P3(1-2-5) ly 
td a = T1, F2, T3, F4 P3(1-3-4) 2,6 


输入 :{a= 一 1, b=2, c=3} 
输出 ;{a= 一 1, b=2, c=6} 
输入 :{a= 一 1, b= 一 2, c= 一 3} 
输出 ;{a= 一 1, b= 一 2, c= 一 5} 


Fl, T2, F3, T4 P3(1-3-4) 3，7 


F1，F2，F3，F4 P4(1-3-5) 4,8 


6.3 黑 盒 测试 方法 


黑 盒 测试 方法 ,也 称 功 能 测试 或 数据 驱动 测试 方法 。 测 试 时 ,在 不 考虑 程序 内 部 结构 
和 内 部 特性 的 情况 下 由 测试 人 员 进 行 测 试 , 以 检查 系统 功能 是 否 按照 “需求 规格 说 明 书 ” 
的 规定 正常 使 用 ,是否 有 不 正确 或 遗漏 了 的 功能 、 功 能 操作 逮 辑 是 否 合理 .是 否 能 接收 输 
入 数据 并 输出 正确 结果 、 人 机 界面 是 否 美观 有 否 出 错 ; 检 查 相应 的 文档 是 否 采用 了 正确 的 
模板 .是 否 满足 规范 要 求 ; 检 查 系统 初始 化 问题 ,安装 过 程 是 否 出 现 问题 ,安装 步骤 是 否 清 
晰 方便 等 。 黑 盒 测试 方法 着 眼 于 程序 外 部 的 用 户 界 面 , 关 注 软件 的 输入 和 输出 ,关注 用 
户 的 需求 ,从 用 户 的 角度 来 验证 软件 的 功能 。 

使 用 黑 盒 测 试 方法 时 , 穷 举 测 试 也 是 不 可 能 的 , 即 不 可 能 完成 所 有 的 输入 条 件 及 其 组 
合 的 测试 。 黑 盒 测 试 法 的 覆盖 率 有 时 比较 难以 测定 或 达到 一 定 水 平时 就 难以 提高 ,这 是 
其 局 限 性 。 所 以 ,在 实际 测试 工作 中 ,还 要 结合 白 盒 测试 方法 ,进行 条 件 、 逻 辑 和 路 径 等 方 
面 的 测试 。 


6.3.1 等 价 类 划分 法 


数据 测试 就 是 借助 数据 的 输入 输出 来 判断 功能 能 否 正常 运行 。 在 进行 数据 输入 测试 
时 ,如 果 需 要 证 明 数据 输入 不 会 引起 功能 上 的 错误 ,或 者 其 输出 结果 在 各 种 输入 条 件 下 都 
是 正确 的 ,就 需要 将 可 输入 数据 域内 的 值 完全 尝试 一 遍 ( 即 穷 举 法 ) ,但 这 实际 上 是 不 现实 
的 。 因 此 ,通常 只 能 选取 少量 有 代表 性 的 输入 数据 ,以 期 用 较 小 的 测试 代价 暴露 出 较 多 的 
软件 缺陷 。 

为 了 解决 这 个 问题 ,设想 是 否 可 以 用 一 组 有 限 的 数据 去 代表 近似 无 限 的 数据 ,这 就 是 
“等 价 类 划分 "方法 的 基本 思想 。 等 价 类 划分 法 就 是 解决 如 何 选择 适当 的 数据 子 集 来 代表 
整个 数据 集 的 问题 ,通过 降低 测试 的 数目 去 实现 * 合 理 的 ?覆盖 ,以 发 现 更 多 的 软件 缺陷 。 
等 价 类 划分 法 基于 对 输入 或 输出 情况 的 评估 ,然后 划分 成 两 个 或 更 多 子 集 来 进行 测试 , 即 


122 


第 6 章 测试 传统 应 用 系统 


将 所 有 可 能 的 有 效 或 无 效 的 输入 数据 划分 成 若干 个 等 价 类 ,从 每 个 等 价 类 中 选择 一 定 的 
代表 值 进行 测试 。 等 价 类 划分 法 是 黑 盒 测试 用 例 设 计 中 一 种 重要 的 、 常 用 的 设计 方法 ,将 
漫 无 边际 的 随机 测试 变 为 具有 针对 性 的 测试 , 极 大 地 提高 了 测试 效率 。 

等 价 类 是 指 某 个 输入 域 的 一 个 特定 的 子 集合 ,在 该 子 集合 中 各 个 输入 数据 对 于 揭露 
程序 中 的 错误 都 是 等 效 的 。 也 就 是 说 ,如 果 用 这 个 等 价 类 中 的 代表 值 作 为 测试 用 例 未 发 
现 程 序 错误 ,那么 该 类 中 其 他 数据 (测试 用 例 ) 也 不 会 发 现 程序 的 错误 。 这 样 ,对 于 表征 该 
类 的 某 个 特定 的 数据 输入 将 能 代表 整个 子 集合 的 输入 , 即 测 试 某 等 价 类 的 代表 值 就 等 效 
于 对 这 一 类 其 他 值 的 测试 。 举 个 例子 ,设计 这 样 的 测试 用 例 , 来 实现 一 个 对 所 有 的 实数 进 
行 开 方 运算 的 程序 的 测试 ,这 时 候 需 要 将 所 有 的 实数 (输入 域 ) 进 行 划 分 ,可 以 分 成 正 实 
数 、 负 实数 和 零 。 考 虑 使 用 十 1. 4444 来 代表 正 实数 ,用 一 2. 345 来 代表 负 实 数 ,输入 的 等 
价 类 就 可 以 使 用 十 1. 4444.、 一 2. 345 和 0 来 表示 。 

在 确定 输入 数据 的 等 价 类 时 , 常 要 分 析 输 出 数据 的 等 价 类 ,以 便 根 据 输出 数据 的 等 价 
类 导出 对 应 的 输入 数据 等 价 类 。 这 样 ,在 等 价 类 划分 过 程 中 ,一 般 要 经 过 两 个 过 程 , 即 分 
类 和 抽象 。 

。 分 类 ,将 输入 域 按照 具有 相同 特性 或 者 类 似 功 能 进行 分 类 。 

。 抽象 ,在 各 个 子 类 中 抽象 出 相同 特性 并 用 实例 来 表征 这 个 特性 。 

等 价 类 划分 法 优点 是 基于 相对 较 少 的 测试 用 例 ,就 能 够 进行 完整 覆盖 ,在 很 大 程度 上 
减少 了 重复 性 ;缺点 是 缺乏 特殊 用 例 的 考虑 ,同时 需要 有 深入 的 系统 知识 ,才能 选择 有 效 
的 数据 。 

在 进行 等 价 类 划分 的 过 程 中 ,不 但 要 考虑 有 效 等 价 类 划分 ,同时 需要 考虑 无 效 的 等 价 
类 划分 。 

。 有 效 等 价 类 是 指 输入 完全 满足 程序 输入 的 规格 说 明 、 有 意义 的 输入 数据 所 构成 的 

集合 ,利用 有 效 等 价 类 可 以 检验 程序 是 否 满足 规格 说 明 所 规定 的 功能 和 性 能 。 

。 无 效 等 价 类 即 不 满足 程序 输入 要 求 或 者 无 效 的 输入 数据 构成 的 集合 。 使 用 无 效 

等 价 类 ,可 以 测试 程序 /系统 的 容错 性 一 一 对 异常 输入 情况 的 处 理 。 

在 程序 设计 中 ,不 但 要 保证 所 有 有 效 的 数据 输入 能 产生 正确 的 输出 ,同时 需要 保障 在 
输入 错误 或 者 空 输入 的 时 候 能 有 异常 保护 ,这 样 才能 保证 软件 的 可 靠 性 。 

在 使 用 等 价 类 划分 法 时 ,设计 一 个 测试 用 例 ,使 其 尽 可 能 多 地 覆盖 尚未 被 覆盖 的 有 
效 等 价 类 ,重复 这 个 过 程 , 直 至 所 有 的 有 效 等 价 类 都 被 覆盖 , 即 分 割 有 效 等 价 类 直到 最 
小 。 对 无 效 等 价 类 ,进行 同样 的 过 程 ,设计 若干 个 测试 用 例 ,覆盖 无 效 等 价 类 中 的 各 个 
子 类 。 


6.3.2 边界 值 分 析 法 


实践 证 明 ,程序 往往 在 输入 /输出 的 边界 值 情况 下 发 生 错误 ,检查 边界 情况 的 测试 用 
例 是 比较 高 效 的 ,可 以 查 出 更 多 的 错误 。 这 就 要 求 测试 人 员 对 输入 条 件 进 行 分 析 并 找 出 
其 中 的 边界 值 条 件 ,通过 对 这 些 边界 值 的 测试 来 发 现 更 多 的 错误 。 

边界 值 分 析 法 对 于 多 变量 函数 的 测试 很 有 效 ,尤其 对 于 像 C/C++ 数据 类 型 要 求 不 是 
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很 严格 的 语言 更 能 发 挥 作用 。 缺 点 是 对 布尔 值 或 逻辑 变量 无 效 , 也 不 能 很 好 地 测试 不 同 
的 输入 组 合 。 边 界 值 分 析 法 常 被 看 做 是 等 价 类 划分 法 的 一 种 补充 ,两 者 结合 起 来 使 用 更 
有 效 。 

边界 值 分 析 法 取决 于 变量 的 范围 和 范围 的 类 型 ,确认 所 有 输入 的 边界 条 件 或 临界 值 ， 
然后 选择 这 些 边界 条 件 ,临界 值 及 其 附近 的 值 来 进行 相关 功能 的 测试 。 

边界 值 分 析 法 的 处 理 技巧 主要 有 

(1) 如 果 输 入 条 件 规定 了 值 的 范围 , 则 取 刚 刚 达到 这 个 范围 的 边界 值 。 

(2) 如 果 输 入 条 件 规定 了 值 的 个 数 , 则 用 最 大 个 数 、 最 小 个 数 、 比 最 大 个 数 多 1 个 、 比 
最 小 个 数 少 1 个 的 数 等 作为 测试 数据 。 

(3) 根据 规格 说 明 的 每 一 个 输出 条 件 , 分 别 使 用 以 上 两 个 规则 。 

(4) 如 果 程 序 的 规格 说 明 给 出 的 输入 域 或 输出 域 是 有 序 集合 (如 有 序 表 、 顺 序 文件 
等 ), 则 应 选取 集合 的 第 一 个 和 最 后 一 个 元 素 作 为 测试 数据 。 

在 边界 值 分 析 法 中 ,最 重要 的 工作 是 确定 边界 值 域 。 一 般 情况 下 , 先 确定 输入 和 输出 
的 边界 ,然后 根据 边界 条 件 进行 等 价 类 的 划分 。 以 一 个 排序 程序 的 边界 值 分 析 为 例 , 其 边 
界 条 件 有 : 

。 排序 序列 为 空 ; 

。 排序 序列 仅 有 一 个 数据 ; 

。 排序 序列 为 最 长 序列 ; 

。 排序 序列 已 经 按 要 求 排 好 序 ; 

。 排序 序列 的 顺序 与 要 求 的 顺序 恰好 相反 ; 

。 排序 序列 中 的 所 有 数据 全 部 相等 。 

上 述 例子 在 数组 边界 检查 时 经 常 遇 到 。 通 常情 况 下 ,软件 测试 所 包含 的 边界 检验 
有 几 种 类 型 : 数字 ,字符 ,位置 .质量 、 大 小 、 速 度 、 方 位 、 尺 寸 . 空 间 等 ,而 相应 的 边界 值 
假定 为 最 大 /最 小 、 首 位 /末尾 、 上 /下 、 最 快 /最 慢 、 最 高 /最 低 、 最 短 / 最 长 、 空 / 满 等 情 
况 , 这 需要 对 用 户 的 输入 以 及 被 测 应 用 软件 本 身 的 特性 进行 详细 的 分 析 , 才 能 够 识别 
出 特定 的 边界 值 条 件 。 另 外 ,还 需要 选取 正好 等 于 、 刚 刚 大 于 和 刚刚 小 于 边界 值 的 数 
据 作 为 测试 数据 。 


6.3.3 判定 表 方 法 


等 价 类 划分 法 和 边界 值 分 析 法 都 没有 考虑 输入 情况 的 组 合 ,这 样 就 可 能 忽视 了 多 个 
输入 组 合 起 来 的 出 错 情况 。 检 验 各 种 输入 条 件 的 组 合并 不 容易 ,因为 即使 将 所 有 的 输入 
条 件 划分 成 等 价 类 ,它们 之 间 的 组 合 情 况 也 还 是 相当 多 。 因 此 ,需要 考虑 采用 一 种 适合 于 
多 种 条 件 的 组 合 ,相应 地 产生 多 个 动作 (结果 ) 的 方法 来 进行 测试 用 例 的 设计 ,这 就 需要 组 
合 分 析 。 

组 合 分 析 是 一 种 基于 每 对 参数 组 合 的 测试 技术 ,主要 考虑 参数 之 问 的 影响 ,大 多 数 错 
误 都 源 之 简单 的 参数 组 合 。 组 合 分 析 的 优点 是 低 成 本 实现 、 低 成 本 维护 .易于 自动 化 、 易 
于 用 较 少 的 测试 案例 发 现 更 多 的 错误 和 用 户 可 以 自 定 义 限制 ;缺点 是 经 常 需要 专家 的 领 
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域 知识 .不 能 测试 所 有 可 能 的 组 合 和 不 能 测试 复杂 的 交互 。 

对 于 多 因素 ,有 时 可 以 直接 对 输入 条 件 进行 组 合 设计 ,不 需要 进行 因果 分 析 , 即 直 
接 采用 判定 表 方 法 。 一 个 判定 表 由 “条 件 ” 和 “活动 ”两 部 分 组 成 ,也 就 是 列 出 一 个 测试 
活动 执行 所 需 的 条 件 组 合 ,所 有 可 能 的 条 件 组 合 定义 了 一 系列 的 选择 ,而 测试 活动 需 
要 考虑 每 一 个 选择 。 例 如 ,打印 机 是 否 能 打印 出 正确 的 内 容 受 多 个 因素 影响 ,包括 驱 
动 程序 纸张 . 墨 粉 等 。 判 定 表 方 法 就 是 对 多 个 条 件 的 组 合 进行 分 析 , 从 而 设计 测试 用 
例 来 覆盖 各 种 组 合 。 判 定 表 从 输入 条 件 的 完全 组 合 来 满足 测试 的 覆盖 率 要求 , 具 有 很 
严格 的 逻辑 性 ,所 以 基于 判定 表 的 测试 用 例 设计 方法 是 最 严格 的 ,测试 用 例 具 有 很 高 
的 完整 性 。 

在 了 解 如 何 制定 判定 表 之 前 , 先 要 了 解 5 个 概念 一 一 条 件 桩 ,动作 桩 、 条 件 项 ,动作 项 
和 规则 。 

。 条件 桩 : 列 出 问题 的 所 有 条 件 , 如 上 述 3 个 条 件 , 即 驱动 程序 .纸张 . 墨 粉 。 

。 动作 桩 : 列 出 可 能 针对 问题 所 采取 的 操作 ,如 打印 正确 内 容 、 打 印 错误 内 容 、 不 打 
印 等 。 
条 件 项 : 针对 所 列 条 件 的 具体 赋值 , 即 每 个 条 件 可 以 取 真 值 和 假 值 。 
。 动作 项 : 列 出 在 条 件 项 (各 种 取 值 ) 组 合 情 况 下 应 该 采取 的 动作 。 
规则 : 任何 一 个 条 件 组 合 的 特定 取 值 及 其 相应 要 执行 的 操作 。 在 判定 表 中 贯穿 
条 件 项 和 动作 项 的 一 列 就 是 一 条 规则 。 

判定 表 制 定 一 般 经 过 下 面 4 个 步骤 ; 

(1) 列 出 所 有 的 条 件 柱 和 动作 桩 ; 

(2) 填 和 人 条件 项 ; 

(3) 填 和 人 动作 项 ,制定 初始 判定 表 ; 

(4) 简化 、 合 并 相似 规则 或 者 相同 动作 。 

仍 以 上 述 * 打 印 机 打印 文件 为 例子 来 说 明 如 何 制 定 判定 表 。 首 先 列 出 所 有 的 条 件 桩 
和 动作 桩 ,为 了 简化 问题 ,不 考虑 中 途 断 电 , 卡 纸 等 因素 的 影响 ,那么 条 件 桩 为 : 

(1) 驱动 程序 是 否 正 确 ? 

(2) 是 否 有 纸张 ? 

(3) 是 否 有 墨 粉 ? 

而 动作 桩 有 两 种 : 打印 内 容 和 不 同 的 错误 提示 。 而 且 假定 : 优先 警告 缺 纸 , 然 后 警告 没 
有 墨 粉 ,最 后 警告 驱动 程序 不 对 。 然 后 输入 条 件 项 , 即 上 述 每 个 条 件 的 值 分 别 取 * 是 (Y)” 和 
“ 否 (N)”, 可 以 简化 表示 为 1 和 0。 根据 条 件 项 的 组 合 ,容易 确定 其 活动 ,如 表 6-8 所 示 。 


表 6-8 初始 化 的 判定 表 


序 号 1 这 3 4 5 6 8 

了 驱动 程序 是 否 正确 1 0 1 0 0 1 0 

条 件 是 否 有 纸张 1 1 0 1 0 1 0 0 
是 否 有 墨 粉 1 1 4 0 1 0 0 0 
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续 表 

序 号 1 2 3 4 名 6 要 8 

打印 内 容 1 0 0 0 0 0 0 0 

_ 提示 驱动 程序 不 对 0 1 0 0 0 0 0 0 
提示 没有 纸张 0 0 1 0 1 0 1 1 
提示 没有 墨 粉 0 0 0 1 0 和 0 0 


如 果 结 果 一 样 , 某 些 因素 取 *1” 或 “0” 没 有 影响 , 即 以 “-” 表 示 , 可 以 合并 这 两 项 ,最 
终 优化 判定 表 如 表 6-9 所 示 。 根 据 表 6-9, 就 可 以 设计 测试 用 例 , 每 一 列 代 表 一 条 测试 


用 例 。 
表 6-9 优化 后 的 判定 表 
序 号 1 2 4/6 3/7/8 

驱动 程序 是 否 正确 1 0 

条 件 是 否 有 纸张 1 1 1 0 
是 否 有 墨 粉 n 1 0 
打印 内 容 1 0 0 0 

动作 提示 驱动 程序 不 对 0 | 0 0 
提示 没有 纸张 0 0 0 1 
提示 没有 墨 粉 0 0 1 0 


6.3.4 因果 图 法 


因果 图 是 一 种 由 自然 语言 写成 的 规范 转换 而 来 的 形式 化 图 形 语言 , 它 借助 图 形 ,着 重 
分 析 输 入 条 件 的 各 种 组 合 ,每 种 组 合 条件 就 是 “ 因 ”, 它 必然 有 一 个 输出 的 结果 ,这 就 是 
“ 果 ”。 它 实际 上 是 一 种 使 用 简化 记号 表示 的 数字 逻辑 图 ,不 仅 能 发 现 输入 、 输 出 中 的 错 
误 , 还 能 指出 程序 规范 中 的 不 完全 性 和 二 义 性 。 因 果 图 法 利用 图 解 分 析 输 入 的 各 种 组 合 
情况 ,有 时 还 要 依赖 所 生成 的 判定 表 。 

由 因果 图 法 生成 测试 用 例 一 般 要 经 过 以 下 4 个 步骤 。 

(1) 分 析 软 件 规格 说 明 书 中 的 输入 /输出 条 件 并 分 析出 等 价 类 ,将 每 个 输入 /输出 赋 
予 一 个 标识 符 ; 分 析 规 格 说 明 中 的 语义 ,通过 这 些 语义 来 找 出 相对 应 的 输入 与 输入 之 间 ， 
输入 与 输出 之 间 的 关系 。 

(2) 将 对 应 的 输入 /输出 之 间 的 关系 关联 起 来 ,并 将 其 中 不 可 能 的 组 合 情 况 标注 成 约 
东 或 者 限制 条 件 ,形成 因果 图 。 

(3) 由 因果 图 转化 成 判定 表 。 

(4) 将 判定 表 的 每 一 列 拿 出 来 作为 依据 ,设计 测试 用 例 。 
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6.3.5 错误 推测 法 


有 经 验 的 测试 人 员 往 往 可 以 根据 自己 的 工作 经 验 和 直觉 推测 出 程序 可 能 存在 的 错 
误 , 从 而 有 针对 性 地 进行 测试 ,这 就 是 错误 推测 法 ,或 叫 探索 性 测试 方法 。 错 误 推 测 法 是 
测试 者 根据 经 验 、 知 识 和 直觉 来 推测 发 现 程序 中 可 能 存在 的 各 种 错误 ,从 而 有 针对 性 地 进 
行 测试 。 

错误 推测 法 的 一 些 示 例如 下 : 

示例 一 : 上 个 版 本 发 现 的 缺陷 对 当前 版 本 测试 有 所 启发 ,进行 类 似 的 探索 新 测试 ,可 
以 发 现 一 些 严重 的 缺陷 。 

示例 二 : 等 价 类 划分 法 和 边界 值 分 析 法 通过 选择 有 代表 性 的 测试 数据 来 暴露 程序 错 
误 ,但 不 同类 型 ,不同 特点 的 程序 还 存在 其 他 一 些 特殊 的 、 容 易 出 错 的 情况 ,例如 一 些 特殊 
字符 (如 *、%V/N\#\@、$、^、、、| 等 ) 被 输入 到 系统 后 产生 例外 情况 。 有 时 ,将 多 个 边 
界 值 组 合 起 来 进行 测试 ,可 能 使 程序 出 错 。 

示例 三 : 客户 端 在 正常 连接 时 一 般 没 问题 ,可 以 试 试 断 掉 连 接 后 再 重新 连接 ,看 看 是 
否 出 现 系统 崩溃 的 情况 ,而 且 可 以 不 断 调整 失去 连接 的 时 间 ,或 者 尝试 不 同 的 连接 次 数 
等 ,以 发 现 一 些 例外 。 

示例 四 : 就 程序 中 容易 出 现 的 问题 ,例如 空 指 针 、 内 存 没有 及 时 释放 、session 失效 或 
JavaScript 字符 转 义 等 ,设想 各 种 情况 ,能 否 引起 问题 的 发 生 , 从 而 设计 出 一 些 特别 的 测 
试用 例 来 发 现 缺陷 。 

错误 推测 法 能 充分 发 挥 人 的 直觉 和 经 验 ,在 一 个 测试 小 组 中 集思广益 ,方便 实用 , 特 
别 是 在 软件 测试 基础 较 差 的 情况 下 ,很 好 地 组 织 测试 小 组 进行 错误 猜测 ,是 一 种 有 效 的 测 
试 方法 。 但 错误 推测 法 不 是 一 个 系统 的 测试 方法 ,只 能 用 做 辅助 手段 , 即 先 用 上 述 方法 设 
计 测 试用 例 ,在 没有 别 的 办 法 可 用 的 情况 下 ,再 采用 错误 推测 法 ,补充 一 些 例子 来 进行 一 
些 额 外 的 测试 。 优 点 是 测试 者 能 够 快速 且 容易 地 切入 .并 能 够 体会 到 程序 的 易 用 与 否 ; 缺 
点 是 难以 知道 测试 的 覆盖 率 ,可 能 丢失 大 量 未 知 的 区 域 ,并 且 这 种 测试 行为 带 有 主观 性 且 
难以 复制 。 


6.4 模糊 测试 方法 


模糊 测试 方法 ,简单 地 说 ,就 是 构造 大 量 的 随机 数据 作为 系统 的 输入 ,从 而 检验 系统 
在 各 种 数据 情况 下 是 否 会 出 现 问题 。 

模糊 测试 方法 在 1989 年 由 美国 麦迪 逊 大 学 的 Barton Miller 教授 提出 ,但 以 前 应 用 
不 多 ,而 当 互 联网 应 用 越 来 越 普遍 时 ,软件 系统 的 安全 性 成 为 人 们 关注 的 焦点 ,模糊 测试 
方法 又 重新 得 到 重视 。 例 如 : 

。 发送 大 量 的 随机 数据 来 进行 服务 器 的 攻击 测试 ,可 能 会 导致 网 站 拒绝 服务 ; 

。 通过 大 量 随 机 测试 ,可 能 会 实现 HTTP 报 文 注入 ,获得 服务 器 的 权限 ,或 导致 服 

务 器 的 HTTP 服务 不 可 用 。 
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模糊 测试 方法 可 以 模拟 黑客 来 对 系统 发 动 攻击 测试 ,在 安全 性 测试 上 发 挥 作 用 ,还 可 
以 用 于 对 服务 器 的 容错 性 测试 。 模 糊 测 试 方法 缺乏 严密 的 逻辑 ,不 去 推导 哪个 数据 会 造 
成 系统 破坏 ,而 是 设 定 一 些 基本 框架 ,在 这 框架 内 产生 尽 可 能 多 的 杂乱 数据 进行 测试 ,发 
现 一 些 意 想不到 的 系统 缺陷 。 由 于 要 产生 大 量 数据 ,模糊 测试 方法 一 般 需 要 通过 软件 工 
具 来 自动 执行 。 


6.5 增 量 测试 与 大 突击 测试 


系统 是 被 逐步 开发 出 来 的 ,是 模块 或 构件 的 集成 。 增 量 测试 与 大 突击 测试 的 区 别 在 
于 选择 是 逐步 集成 还 是 成 块 地 进行 软件 产品 的 测试 。 根 据 增 量 测试 策略 ,首先 对 程序 的 
每 个 程序 单元 或 程序 部 件 单独 进行 测试 , 称 为 模块 测试 .单元 测试 或 部 件 测试 。 一 旦 单个 
程序 部 件 都 能 运行 ,就 将 其 中 有 调用 关系 的 一 些 程序 部 件 集成 在 一 起 测试 。 它 们 也 可 能 
不 能 协同 工作 ,如 函数 调用 中 返回 变量 的 出 错 情况 只 有 当 调用 该 函数 的 程序 和 函数 本 身 
一 同 测试 时 才能 发 现 。 将 产品 的 各 部 分 组 装 起 来 (或 组 装 过 程 中 ) 进 行 测试 称 为 集成 测 
试 。 随 着 集成 测试 的 进行 ,一 组 一 组 的 模块 结合 起 来 ,直到 最 后 所 有 模块 都 被 组 合 起 来 。 
在 增 基 测试 中 , 当 单 独 测试 一 个 模块 时 ,所 有 的 错误 要 么 在 这 个 模块 内 ,要 么 在 调用 这 个 
模块 的 驱动 程序 里 。 这 样 ,一 旦 发 现 出 错 情况 ,就 能 很 容易 界定 出 错 的 范围 ,找到 问题 所 
在 。 如 果 把 两 个 经 过 单元 测试 的 模块 组 合 起 来 测试 时 产生 了 新 间 题 ,几乎 可 以 肯定 错误 
就 发 生 在 两 个 模块 之 间 的 接口 上 。 增 量 测试 的 另 一 个 好 处 是 程序 员 可 以 把 注意 力 集中 在 
每 个 单独 的 模块 上 ,这 样 可 以 更 好 地 实现 测试 覆盖 。 增 量 测试 的 主要 问题 在 于 需要 额外 
编写 特殊 的 测试 程序 ( 即 驱动 模块 和 /或 桩 模块 ) 。 

桩 模块 和 驱动 模块 常常 是 临时 性 代码 ,它们 不 会 出 现在 产品 的 最 终 版 本 中 。 但 是 ,一 
且 被 编写 出 来 ,只 要 程序 一 改变 ,它们 就 得 用 来 再 次 测试 程序 。 

在 大 突击 测试 中 ,所 有 模块 一 次 性 集成 为 一 个 完整 的 系统 ,然后 进行 完全 测试 。 但 所 
有 模块 在 一 起 测试 很 容易 造成 系统 崩溃 。 大 突击 测试 的 唯一 好 处 ,就 是 无 须 编写 桩 模块 
和 驱动 模块 代码 。 但 其 不 足 之 处 却 显而易见 ,主要 是 : 要 想 找 出 导致 失效 的 原因 很 困难 。 
由 于 大 多 数 模 块 都 可 能 存在 缺陷 ,一旦 系统 运行 失效 ,很 难 确定 到 底 是 哪个 模块 中 的 哪个 
缺陷 导致 了 该 问题 。 当 不 同 模块 中 的 缺陷 同时 被 触发 时 ,问题 会 更 让 人 困惑 。 

增 量 测试 的 基本 集成 策略 是 自 顶 向 下 和 自 底 向 上 。 在 自 底 向 上 测试 中 ,首先 测试 最 
低层 次 的 模块 ,利用 辅助 的 测试 驱动 模块 调用 它们 并 传递 测试 数据 ,然后 再 测试 更 高 层次 
的 模块 。 在 较 高 层次 模块 的 测试 中 可 以 直接 调用 已 测试 过 的 较 低层 次 的 模块 。 在 自 顶 向 
下 测试 中 ,首先 测试 的 则 是 顶层 模块 。 无 须 编 写 驱动 模块 ,但 要 使 用 桩 模块 , 当 项 层 模块 
被 证 明 无 误 后 再 测试 下 一 个 高 层次 的 模块 。 


6.6 极限 测试 


Kent Beck 在 20 世纪 90 年 代 提出 了 一 种 名 为 极限 编程 的 软件 开发 方法 ,该 方法 的 
主要 目的 是 利用 轻 量 、 敏 捷 的 开发 过 程 , 使 开发 人 员 能 够 更 快 地 完成 应 用 程序 的 开发 ,这 
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样 就 更 有 机 会 在 激烈 的 竞争 中 占 得 先 机 。 与 传统 的 软件 开发 方法 相 比 ,极限 编程 的 优势 
在 于 开发 效率 高 ,而 不 利之 处 在 于 代码 质量 得 不 到 保证 。 为 此 ,Kent Beck 又 提出 利用 频 
繁 的 测试 来 保证 代码 质量 。 也 就 是 说 ,每 次 代码 发 生变 化 都 需要 进行 相应 的 测试 ,以 确保 
其 能 够 满足 需求 规约 。 这 种 为 极限 编程 量 身 定做 的 测试 方式 通常 称 为 极限 测试 ,由 于 极 
限 编程 可 以 看 做 是 由 测试 驱动 完成 的 ,这 种 开发 方式 也 被 称 为 测试 驱动 开发 。 


6.6.1 极限 编程 的 主要 特征 


极限 编程 强调 灵活 的 分 析 和 设计 ,在 软件 开发 中 只 经 过 简单 的 分 析 和 设计 就 进入 编 
码 阶段 ,而 在 编码 过 程 中 强调 对 已 有 代码 的 测试 和 开发 人 员 与 客户 的 交互 。 这 样 ,开发 人 
员 可 以 根据 测试 结果 和 用 户 反 馈 不 断 地 对 代码 重 构 和 进行 新 的 修改 。 具 体 而 言 ,极限 编 
程 与 传统 的 软件 开发 方法 相 比 ,具有 以 下 几 个 主要 特征 : 

(1) 简单 的 分 析 设计 。 传 统 的 软件 开发 方法 通常 需要 进行 详细 的 分 析 和 设计 ,并 要 
求 开 发 人 员 严 格 按照 设计 规约 进行 编码 。 这 种 方法 的 优点 在 于 能 够 通过 详细 的 设计 规约 
来 规范 开发 人 员 的 编码 活动 ,减少 编码 的 随意 性 。 但 这 种 方法 一 般 难以 处 理 不 确定 或 者 
易 变 的 用 户 需求 。 针 对 这 个 问题 ,极限 编程 不 在 最 初 的 分 析 设 计 上 花费 太 多 的 时 间 和 精 
力 ,而 是 期 望 开发 人 员 能 够 在 编码 期 间 不 断 和 用 户 交流 , 随 需求 的 变化 修改 和 重 构 代 码 。 
实际 上 ,类 似 的 思路 也 用 在 了 快速 原型 方法 中 ,只 是 快速 原型 方法 还 是 把 重点 放 在 需求 的 
获取 上 ,开发 原型 的 主要 目的 也 是 更 准确 地 获取 需求 。 

(2) 频繁 的 客户 交流 。 在 传统 的 软件 开发 中 需求 之 所 以 难以 获取 ,其 中 一 个 主要 原 
因 就 是 用 户 无 法 凭空 想象 出 要 开发 的 软件 的 功能 。 如 果 拿 一 个 可 运行 的 软件 和 用 户 进行 
协商 ,用 户 往 往 能 够 提供 大 量 且 详 细 的 修改 意见 ,这 些 修 改 意见 实际 上 反映 了 用 户 的 需 
求 。 由 于 用 户 需 求 容易 发 生变 化 ,在 编码 过 程 中 不 断 地 拿 修改 过 的 中 间 版 本 与 用 户 交 流 ， 
有 助 于 捕获 用 户 需 求 的 变化 。 从 这 点 上 看 ,极限 编程 类 似 于 一 个 频繁 递 进 的 快速 原型 开 
发 过 程 。 
(3) 增 量 式 开发 。 为 了 能 够 保证 编码 过 程 中 总 是 存在 可 运行 的 软件 ,极限 编程 通常 
要 求 小 规模 递增 式 的 开发 , 即 每 次 只 添加 细小 的 、 可 增值 的 特征 。 通 常 每 次 开发 在 一 天 内 
完成 ,这 样 就 可 以 保证 每 天 都 有 可 运行 的 版 本 。 在 增 量 式 的 开发 下 ,开发 人 员 可 以 更 容易 
地 与 客户 交流 ,也 有 助 于 不 断 地 对 新 增加 的 特征 进行 测试 。 

(4) 连续 的 测试 。 极 限 编程 中 测试 包括 两 个 方面 : 单元 测试 和 验收 测试 ,这 两 方面 
的 测试 贯穿 在 整个 编程 过 程 中 。 通 常 ,在 模块 编写 前 就 生成 单元 测试 用 例 ,模块 必须 通过 
单元 测试 才 算 完成 开发 ;由 于 需要 频繁 地 把 新 开发 的 模块 与 原 有 程序 集成 ,因此 也 需要 频 
繁 地 对 集成 后 的 程序 进行 验收 测试 。 从 这 个 意义 上 讲 , 整 个 极限 编程 过 程 可 以 看 做 是 由 
测试 驱动 的 。 


6.6.2 极限 测试 的 过 程 


极限 测试 本 质 上 是 为 了 满足 极限 编程 的 思想 和 流程 而 设计 的 一 套 测 试 策略 和 流程 ， 
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其 本 身 并 不 局 限于 使 用 特定 的 测试 技术 和 方法 ,大 多 数 的 测试 技术 和 方法 都 可 以 在 极限 
测试 中 使 用 。 

极限 编程 采用 的 是 一 种 频繁 迭代 的 开发 方式 ,整个 软件 项 目 由 一 系列 增 量 式 开发 组 
成 ,单元 测试 和 验收 测试 是 贯穿 始终 的 关键 步骤 。 

1) 单元 测试 

单元 测试 是 极限 编程 中 最 重要 的 发 现 缺陷 的 手段 。 极 限 编程 中 的 单元 测试 与 传统 单 
元 测试 基本 类 似 ,主要 区 别 在 以 下 两 个 方面 : 

首先 ,极限 编程 中 的 单元 测试 是 由 编码 人 员 完 成 的 ,编码 人 员 直 接 依据 与 用 户 的 交流 
结果 进行 编码 ,缺少 详细 的 需求 和 设计 规约 ,这 样 就 使 得 专门 的 测试 人 员 难 以 依据 规约 开 
展 测试 工作 。 从 这 个 角度 看 ,极限 编程 要 求 编码 人 员 进 行 测试 也 是 不 得 已 而 为 之 。 从 另 
一 个 角度 看 ,由 于 编程 人 员 熟 悉 自 己 编写 的 代码 ,测试 驱动 和 测试 桩 的 编写 工作 会 比较 轻 
松 ,而 且 在 后 续 的 测试 中 可 以 重复 利用 ,这 在 一 定 程度 上 缓解 了 传统 单元 测试 中 编写 测试 
驱动 和 测试 桩 开销 较 大 的 问题 。 

其 次 ,极限 编程 要 求 在 编码 之 前 先 设计 测试 ,这 主要 是 考虑 到 两 方面 的 因素 。 第 一 个 
因素 是 为 了 提高 编码 人 员 测 试 自己 编写 的 代码 的 效率 。 通 常 编码 人 员 都 希望 自己 编写 的 
代码 能 够 迅速 通过 测试 ,因此 在 测试 中 难以 尽 全 力 发 现 缺 陷 。 先 设计 测试 用 例 就 可 以 使 
测试 用 例 的 设计 不 受 已 编写 代码 的 干扰 ,要 想 迅 速 通过 测试 就 只 能 编写 高 质量 的 代码 。 
第 二 方面 的 因素 是 为 了 使 编码 人 员 更 好 地 把 握 软 件 需 求 。 由 于 没有 详细 的 设计 规约 , 编 
码 人 员 对 需求 的 理解 主要 存留 在 自己 的 脑海 里 ,设计 测试 用 例 的 过 程 实际 上 就 是 对 需求 
的 整理 过 程 ,甚至 可 以 把 设计 出 来 的 测试 用 例 看 做 极限 编程 中 的 需求 规约 ,而 这 又 可 以 为 
编码 人 员 设 立 明确 的 编码 目标 : 编写 能 够 通过 单元 测试 的 代码 。 

2) 验收 测试 

验收 测试 主要 由 用 户 完成 ,当然 编码 人 员 也 必须 在 场 , 以 便 与 用 户 进行 交流 。 极 限 编 
程 强调 验收 测试 的 目的 在 于 加 强 用 户 参与 软件 开发 的 力度 ,从 而 减 小 由 于 需求 变化 或 开 
发 人 员 与 用 户 交流 不 畅 而 引起 的 问题 。 在 传统 的 测试 中 ,有 用 户 参 与 的 验收 测试 处 于 测 
试 活动 的 后 期 ,一旦 发 现 严 重 问题 ,会 带 来 巨大 的 开销 。 

当然 ,极限 编程 中 的 验收 测试 也 存在 一 些 滁 端 ,主要 是 难以 发 现 前 面 的 单元 测试 没有 
发 现 的 缺陷 。 验 收 测试 的 形式 决定 了 其 不 是 很 详细 严格 的 测试 ,编码 中 常见 的 错误 大 多 
可 以 逃 过 验收 测试 。 多 轮 增 量 开发 间 的 集成 缺陷 很 可 能 会 既 逃 过 单元 测试 又 逃 过 验收 
测试 。 


6.6.3 极限 测试 的 实施 


为 了 更 好 地 完成 极限 测试 ,在 实施 中 需要 注意 以 下 几 个 方面 : 

1) 单元 测试 用 例 的 生成 

极限 测试 并 不 限定 采用 何 种 生成 单元 测试 用 例 的 方法 ,但 由 于 单元 测试 用 例 的 生成 
是 在 编码 之 前 ,而 且 没 有 详细 的 规约 可 用 ,因此 测试 用 例 的 生成 通常 采用 黑 盒 测试 技术 ， 
而 且 需 要 编码 人 员 大 量 参 与 。 
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2) 单元 测试 工具 的 使 用 

由 于 极限 编程 中 需要 频繁 地 进行 单元 测试 ,使 用 单元 测试 工具 可 以 有 效 地 减少 测试 
的 工作 量 。 实 际 上 , 随 着 越 来 越 多 的 开发 人 员 接 受 了 极限 编程 , 越 来 越 多 的 针对 不 同 开 发 
语言 的 单元 测试 工具 也 不 断 涌现 出 来 ,最 常见 的 是 针对 Java 语言 的 JUnit, 与 其 类 似 的 工 
具 还 包括 RubyUnit、SUnit、CppUnit、NUnit、PyUnit 和 vbUnit, 分 别针 对 Ruby 语言 、 
Smalltalk 语言 .C++ 语言 、. Net 平台、Python 语言 和 Visual Basic 语言 。 利 用 这 些 单元 
测试 工具 可 以 很 方便 地 开发 出 可 以 重复 使 用 的 测试 驱动 和 测试 桩 ,在 每 轮 增 量 开发 中 可 
以 针对 相应 的 测试 目标 仅 做 少量 的 修改 。 

3) 模拟 对 象 的 使 用 

极限 编程 需要 频繁 地 对 所 编 代 码 进 行 测试 ,这 就 要 求 每 次 测试 都 能 迅速 地 针对 现 有 
代码 建立 测试 环境 。 一 个 经 常 遇 到 的 问题 是 ,由 于 缺少 一 些 重要 对 象 的 实现 代码 , 现 有 的 
代码 难以 编译 和 运行 。 如 果 这 些 对 象 的 实现 比较 困难 ,整个 测试 过 程 会 因 等 待 这 些 对 象 
的 实现 而 滞后 。 所 谓 模拟 对 象 ,就 是 以 一 种 轻 量 级 的 方式 快速 实现 一 些 替 代 对 象 , 它 能 够 
在 测试 中 较为 准确 地 模拟 这 些 实现 比较 复杂 的 对 象 。 实 际 上 ,模拟 对 象 可 以 看 做 是 一 种 
特殊 的 测试 桩 。 


6.7 基于 风险 的 测试 


测试 被 定义 为 是 “对 软件 系统 中 潜在 的 各 种 风险 进行 评估 的 活动 ,其 自身 的 风险 性 
是 大 家 公认 的 ,因为 测试 的 覆盖 度 不 能 达到 100%% 。 

基于 风险 的 测试 是 指 评估 测试 的 优先 级 , 先 做 高 优先 级 的 测试 ,如 果 时 间或 精力 不 
够 , 低 优先 级 的 测试 可 以 暂时 先 不 做 ,也 就 是 根据 事情 的 轻重 缓急 来 决定 测试 工作 的 重 
点 。 影 响 测试 优先 级 的 因素 主要 是 : 

。 该 功能 出 问题 时 对 用 户 的 影响 有 多 大 ? 对 用 户 的 影响 越 大 ,其 优先 级 越 高 。 

。 出 问题 的 概率 有 多 大 ? 问题 的 概率 受 功能 模块 的 复杂 性 ,代码 质量 的 影响 。 复 杂 

人 性 越 高 或 代码 质量 越 低 ,问题 发 生 的 概率 就 越 大 , 则 测试 的 优先 级 越 高 。 

还 有 其 他 一 些 影响 因素 ,例如 新 功能 或 修改 的 功能 对 该 功能 是 否 有 很 高 的 依赖 性 ? 
依赖 性 越 高 ,优先 级 越 高 。 

软件 产品 的 风险 度 可 以 通过 出 错 的 影响 程度 和 出 现 的 概率 来 计算 ,测试 可 以 根据 不 
同 风 险 度 来 决定 测试 的 优先 级 和 测试 的 覆盖 率 。 基 于 风险 的 测试 过 程 可 以 归纳 为 以 下 几 
个 步骤 : 

(1) 列 出 软件 的 所 有 功能 和 特性 ; 

(2) 确定 每 个 功能 出 错 的 可 能 性 ; 

(3) 如 果 某 个 功能 出 错 或 欠缺 某 个 特征 ,需要 评估 其 对 用 户 使 用 软件 产品 的 影响 
程度 ; 

(4) 根据 上 面 两 个 步骤 ,计算 风险 度 ; 

(5) 根据 可 能 出 错 的 迹象 ,来 修改 风险 度 ; 

(6) 决定 测试 的 范围 ,编写 测试 方案 。 
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除了 上 面 所 介绍 的 各 种 测试 方法 之 外 ,一 些 文献 还 介绍 了 正 交 试 验 法 ,形式 化 测试 方 
法 .ALAC 测试 方法 和 随机 测试 方法 等 。 不 同 的 测试 方法 其 侧重 点 不 一 样 , 有 其 特定 的 
应 用 范围 。 例 如 白 盒 测试 主要 用 于 单元 测试 , 黑 盒 测 试 主要 用 于 功能 测试 ,模糊 测试 方法 
应 用 于 容错 性 测试 和 安全 性 测试 ,形式 化 方法 则 用 于 对 软件 系统 可 靠 性 有 很 高 要 求 的 应 
用 领域 等 。 在 黑 盒 测 试 方法 中 ,等 价 类 划分 方法 和 边界 值 方法 是 针对 单 因素 的 数据 输入 
来 设计 测试 用 例 , 而 判定 表 、 因 果 图 、 正 交 试验 法 等 是 解决 多 因素 组 合 问题 。 在 实际 工作 
中 ,应 根据 需要 ,将 不 同 的 方法 结合 起 来 运用 ,形成 综合 测试 策略 ,以 达到 更 完美 的 测试 效 
果 , 如 表 6-10 所 示 。 


表 6-10 ”测试 方法 的 4 种 基本 组 合 


白 盒 测试 方法 黑 盒 测试 方法 
静态 - 白 盒 测试 方法 静态 - 黑 盒 测 试 方法 
静态 测试 方法 | (对 源 程序 代码 的 语法 检查 扫描、\ 评 |( 对 需求 文档 .需求 规格 说 明 书 的 审查 活动 ,一 些 
审 等 ) 非 技术 性 文档 测试 等 7 
动态 - 白 盒 测 试 方法 动态 - 黑 盒 测 试 方法 
动态 测试 方法 | (在 单元 测试 中 ,一 边 运 行 代码 ,一 边 | (在 运行 程序 时 ,通过 数据 驱动 对 软件 进行 功能 
对 结果 进行 检查 、 验 证 和 调试 等 ) | 测试 ,从 用 户 角度 验证 软件 的 各 项 功能 ) 


6.8 习题 


请 参考 课文 内 容 以 及 其 他 资料 ,完成 下 列 选择 题 。 
(1) 软件 静态 分 析 一 般 包括 : 控制 流 分 析 、 数 据 流 分 析 、 接 口 分 析 , 以 及 ( i 
A. 表达 式 分 析 ”B. 功能 分 析 C. 边界 值 分 析 D. 因果 图 分 析 
(2) 在 程序 测试 中 ,用 于 检查 程序 模块 或 子 程序 之 间 的 调用 是 否 正确 的 静态 分 析 方 


法 是 (  )。 
A. 操作 性 分 析 ”B. 可 靠 性 分 析 ”C. 引用 分 析 D. 接口 分 析 
(3) 使 程序 中 每 个 判定 表达 式 的 每 个 条 件 的 可 能 取 值 至 少 执行 一 次 的 覆盖 方式 被 称 
为 (  )。 
A. 逻辑 覆盖 B. 语句 覆盖 
C. 判定 柳 盖 或 分 支 获 盖 D. 条 件 柳 盖 
(4) 和 白 盒 测 试 方法 一 般 适 合用 于 ( ) 测 试 。 
A. 单元 B. 系统 C. 集成 D. 确认 


(5) 有 一 段 小 程序 ,对 数组 A[n] 中 所 有 正 整 数 和 负 整 数 求 累加 和 ,negat 和 posit 分 
别 返 回 负 整数 和 正 整 数 的 累加 和 。 


int maxInt= 32767, minInt— 32768; 

negat= 0; posit= 07 

for (int i=0; i<n; 计 +) 

if RH]<0 gg A[i]>=minInt - negat) negat— negat+ A[i]; 
else if (A[i]>0 sg A[i]<=maxInt— posit) posit—posit+A[i]; 
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可 能 的 测试 路 径 数 是 ( ji 
A. 3 B. 4 D. 6 
(6) 图 6-3 是 一 个 判定 路 径 柳 盖 图 ,其 中 用 “CO” 表示 判定 语句 ,用 “ 口 " 表 示 处 理 语 
句 ,用 “O 〇 ”表示 判定 汇合 点 ,用 “@-@” 表 示 判 定 路 径 。 若 有 一 个 测试 用 例 获 盖 了 判定 路 
径 A.B、E.H, 则 判定 路 径 覆 盖 率 为 ( )5 


A. 57.1% B. 78.6% C. 90% D. 100% 
we 所 
判定 路 径 D ,人 让、 
BD 、、 判定 路 径 G 
. 起、 
你 B24 ~ 
党 深 " 忆 
妈 ©@---------®@ 2 、 
Rg 判定 路 径 E ® » 
® © ® @- © E 
判定 路 径 A 判定 路 径 C 判定 路 径 H 


图 6-3 习题 6.6 


(7) 人 们 从 长 期 的 测试 工作 经 验 得 知 , 大 量 的 错误 是 发 生 在 输入 范围 的 ( js 
A. 边界 上 B. 内 部 C. 外 部 D. 相互 作用 上 
(8) 下 列 几 种 逻辑 覆盖 标准 中 ,设计 足够 的 测试 用 例 , 运 行 被 测 程序 ,使 得 程序 中 所 
有 可 能 的 路 径 至 少 执行 一 次 , 称 为 ( Ns 
A. 判定 覆盖 B. 条 件 槛 盖 C. 语句 覆盖 D. 路 径 获 盖 
(9) 以 下 关于 覆盖 测试 的 说 法 中 ,错误 的 是 ( ) 。 
A. 语句 覆盖 要 求 每 行 代码 至 少 执行 一 次 
B. 在 路 径 测试 中 必须 用 不 同 的 数据 重复 测试 同一 条 路 径 
C. 路 径 测试 不 是 完全 测试 ,即使 每 条 路 径 都 执行 了 一 次 ,程序 还 是 可 能 存在 
缺陷 
D. 分 支 覆 盖 应 使 程序 中 每 个 判定 的 真 假 分 支 至 少 执行 一 次 
(10) 有 一 个 判断 语句 : 
证 (!(ch >= "0' && ch <= '9') ) printf ("this is not a digit\\n"); 
else printf ("This is a digit!\\n" ); 
为 实现 判定 -条 件 覆 盖 ,需要 设计 的 测试 用 例 个 数 至 少 应 为 ( 站 
A. 1 3 这 人 D. 4 
(11) 下 列 有 关 白 盒 测试 的 叙述 中 ,错误 的 是 ( 入 
A. 白 盒 测 试 是 在 同时 拥有 源 代 码 和 可 执行 代码 的 情形 下 才 可 以 进行 的 一 种 软 
件 测试 方法 
B. 白 盒 测试 应 该 由 开发 人 员 实施 , 因 为 只 有 他 们 才能 够 访问 测试 执行 所 涉及 
的 代码 
C. 即使 对 所 有 的 源 代码 都 进行 了 100% 的 逻辑 覆盖 测试 ,也 不 能 保证 程序 中 没 
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有 错误 
D. 软件 测试 人 员 制 定 测试 计划 的 目的 是 想 尽 可 能 多 地 对 源 代码 进行 测试 
(12) 下 面 有 关 路 径 测试 的 叙述 中 ,错误 的 是 ( )v 
A. 路 径 覆 盖 是 最 强 的 覆盖 测试 , 它 不 但 能 发 现 其 他 覆盖 测试 能 发 现 的 问题 ,还 
能 发 现 其 他 覆盖 测试 不 能 发 现 的 问题 
B. 测试 员 不 可 能 对 任何 一 个 程序 都 完成 100% 的 路 径 测试 
C. 不 提倡 用 不 同 的 数据 重复 测试 同一 条 路 径 
D. 即使 每 条 路 径 都 执行 了 一 次 ,程序 还 是 可 能 存在 缺陷 
(13) 对 于 如 下 给 出 的 程序 段 : 
if (PPB) and (c=5) 
then d Pl; 


若 考虑 满足 条 件 -判定 覆盖 原则 以 及 内 部 边界 条 件 , 需 要 设计 的 最 小 测试 输入 
数据 集 可 能 是 ( ) 。 
A, (A=2, B=1, C=5),(A=2, B=1, C=4),(A=1, B=2, C=5),(A=1, 
B= C= 
B. (A=2, B=1, C=5),(A=2, B=1, C=4),(A=1, B=2, C=5),(A=1, 
B=2, C=4) 
C. (A=2, B=1, C=5),(A=2, B=1, C=4),(A=1, B=2, C=5) 
D, (A=2, B=1, C=5),(A=2, B=1, C=4) 
(14) 下 列 关 于 逻辑 覆盖 的 说 法 中 ,错误 的 是 ( 庆 
A. 满足 条 件 覆 盖 的 测试 不 一 定 满足 判定 覆盖 
B. 满足 条 件 组 合 覆 盖 的 测试 一 定 满足 判定 覆盖 ,条件 覆 盖 和 判定 -条 件 覆 盖 
C. 满足 路 径 获 盖 的 测试 也 一 定 满足 条 件 组 合 获 盖 
D. 满足 判定 -条 件 覆 盖 的 测试 也 一 定 满足 判定 蓝 盖 和 条 件 槛 盖 
(15) 下 面 一 段 小 程序 是 判断 一 个 长 度 为 n 的 字符 数组 是 否 中 心 对 称 。 例如， 
“abcddcba” 或 “abcdcba” 就 是 中 心 对 称 。 作 为 内 部 边界 值 ,应 填 入 ( ) 内 的 判断 是 
( Ne 
A i B. i 一 一 j( 判 等 ) C. i 二 j D. i 二 j( 判 不 等 ) 


Bool center - sym(char S[], int n) { 
// 刊 断 字符 组 s 中 的 n 个 字符 是 否 中 心 对 称 ,是 则 函数 返回 true, 否 则 返回 false; 
int i=1, j=-n; 
while() 
二 (S[i-]] 二 Sj-]]) retum false; // i, j 从 1 开始 计数 ,数组 从 0 开始 
else { 二 计 1, 于 于 1 } 
retum true; 
} 


(16) 如 果 程 序 通过 了 100% 的 代码 覆盖 率 测试 , 则 说 明 程序 满足 了 ( 站 
A. 语句 覆盖 B. 编程 规范 C. 设计 规格 D. 功能 需求 
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(17) 下 面 有 关 逮 辑 覆 盖 的 说 法 中 错误 的 是 ( 多 
A. DDP 覆盖 是 判定 覆盖 的 一 个 变 体 
B. 满足 条 件 覆盖 一 定 也 满足 判定 覆盖 
C. 指令 块 覆盖 属于 语句 覆盖 
D. 若 判定 覆盖 率 达到 100%% , 则 语句 覆盖 率 一 定 也 达到 100% 
(18) 对 于 具有 串联 型 分 支 结构 的 程序 ,如 果 有 7 个 判断 语句 串联 则 使 用 正 交 实验 设 
计 法 ,至少 需要 的 测试 用 例 数 应 为 (  )。 
A 2 B: 2 C2 DBD: 2 
(19) 针对 下 列 程序 段 ,需要 ( ) 个 测试 用 例 才 可 以 满足 语句 覆盖 的 要 求 。 
Switch (value) 
{ 
Case 0: 
other= 30; 
break; 


Case 1: 


A.2 B. 3 C. 4 D. 5 
(20) 下 列 有 关 黑 盒 测 试 的 叙述 中 ,错误 的 是 ( 和 
A. 黑 盒 测试 是 在 不 考虑 源 代 码 的 情形 下 进行 的 一 种 软件 测试 方法 
B. 最 好 由 测试 人 员 、 最 终 用 户 和 开发 人 员 组 成 的 团队 来 实施 黑 盒 测试 
C. 黑 盒 测 试 主要 是 通过 对 比 和 分 析 实 测 结果 和 预期 结果 来 发 现 它们 之 间 的 差 
异 ,所 以 黑 盒 测试 又 称 为 “数据 驱动 ?测试 
D. 数据 流 测试 是 一 种 黑 盒 测试 方法 
(21) 关于 等 价 分 类 测试 法 ,下 列 说 法 不 正确 的 是 (  )。 
A. 使 用 等 价 分 类 法 设计 测试 方案 时 首先 需要 划分 输入 数据 的 等 价 类 
B. 等 价 类 是 指 某 个 输入 域 的 子 集合 ,在 该 子 集合 中 各 个 输入 数据 对 于 揭露 程 
序 中 的 错误 都 是 等 效 的 
C. 测试 某 个 等 价 类 的 代表 值 就 等 价 于 对 这 一 类 其 他 值 的 测试 
D. 等 价 类 的 划分 始终 不 能 详尽 ,所 以 要 尽量 避免 使 用 等 价 分 类 法 进行 测试 
(22) 如 果 程 序 中 有 两 个 判定 条 件 , 其 复合 条 件 表达 式 分 别 为 (a 二 二 3) and (b 二 二 6) 
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和 (a 之 0) or (c 一 2), 则 为 了 达到 100%% 的 判定 覆盖 率 ,至少 需 要 设计 的 测试 用 例 个 数 


六 Ci 3 
Bt B. 2 如 ;党 D. 4 
(23) 以 下 程序 的 路 径 数 为 ( ys 
if (ac8) 


{ 
if (b>0) 
result=a * b; 
} 
if (c>8) result +=1; 
A. 3 B. 6 5 总 : 论 
(24) 被 看 做 一 个 “ 主 程序 ”主要 用 来 接收 测试 数据 ,把 这 些 数据 传送 给 被 测试 的 模 
块 ,并 且 打 印 出 有 关 数 据 的 模块 是 ( js 
A. 桩 模块 B. 数据 模块 C. 接口 模块 D. 驱动 模块 
(25) 数据 流 覆 盖 关注 的 是 程序 中 某 个 变量 从 其 声明 、 赋 值 到 引用 的 变化 情况 , 它 是 
下 列 哪 种 覆盖 的 变种 ? 〈 ) 
A. 语句 覆盖 B. 控制 覆盖 C. 分 支 覆盖 D. 路 径 窗 六 
(26) 程序 的 流程 图 如 图 6-4 所 示 , 采 用 路 径 获 
盖 法 进行 测试 , 则 至 少 需要 几 个 测试 用 例 可 以 覆盖 
所 有 可 能 的 路 径 ? 〈 ) 
A. 5 B. 6 
人 D. 8 


< 
(27) 如 果 一 个 判定 中 的 复合 条 件 表达 式 为 
(A>1) or (B 二 =3) , 则 为 了 达到 100%% 的 条 件 获 盖 -| 
1 


率 ,至 少 需要 设计 多 少 个 测试 用 例 ? (。 ) 
A. 1 B. 2 
他 D. 4 
(28) 基本 路 径 测试 满足 ( 和 
A. 语句 覆盖 B. 路 径 获 盖 


C. 分 支 复 头 。D. 条 件 赣 盖 号 上 一 


(29) 以 程序 内 部 的 逻辑 结构 为 基础 的 测试 用 例 i 


设计 技术 属于 (。 )。 
A. 灰 盒 测试 B. 数据 测试 C. 黑 盒 测试 D. 白 盒 测试 
(30) 下 面 是 一 个 对 整数 数组 A 中 的 前 n 个 元 素 求 最 小 值 的 C 程序 ,函数 返回 最 小 
元 素 的 位 置 。 
int minValue (int A[], int n) { 
int =0; 
for (int 于 1 j <=n1; t+) 
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if RDI]<RADIQ) Ej; 
Teturn kz 
} 
当 n 二 4 时 ,程序 中 可 能 的 执行 路 径 数 为 ( De 
A.2 B. 4 C8 D. 16 
(31) 下 列 指导 选择 和 使 用 测试 覆盖 率 的 原则 中 错误 的 是 ( ) 
A. 覆盖 率 不 是 目的 , 仅 是 一 种 手段 
B. 不 要 追求 绝对 100%% 的 覆盖 率 
C. 不 可 能 针对 所 有 的 覆盖 率 指标 来 选择 测试 用 例 
D. 只 根据 测试 覆盖 率 指标 来 指导 测试 用 例 的 设计 
(32) 在 以 下 有 关 逮 辑 覆 盖 的 说 法 中 错误 的 说 法 是 ( 和 
A. 所 有 满足 条 件 组 合 覆 盖 标 准 的 测试 用 例 集 , 也 满足 路 径 覆 盖 的 覆盖 标准 
B. 条 件 覆 盖 能 够 查 出 条 件 中 包含 的 错误 ,但 有 时 达 不 到 判定 覆盖 的 覆盖 率 
要 求 
C. 路 径 覆 盖 的 查 错 能 力 很 强 ,但 有 时 达 不 到 条 件 组 合 覆 盖 的 覆盖 率 要 求 
D. 判定 覆盖 包含 了 语句 覆盖 ,但 它 不 能 保证 每 个 错误 条 件 都 能 检查 得 出 来 


6.9 ”实验 与 思考 
6.9.1 实验 目的 


本 节 “ 实 验 与 思考 ”的 目的 : 

(1) 熟悉 静态 测试 与 动态 测试 . 白 盒 测试 方法 、 黑 盒 测 试 方法 等 软件 测试 技术 的 基本 
(2) 初步 掌握 用 白 盒 测试 法 设计 高 覆盖 率 测 试用 例 的 方法 。 
(3) 初步 掌握 用 黑 盒 测试 法 中 等 价 类 划分 ,边界 值 分 析 、 因 果 图 以 及 错误 推测 等 设计 
测试 用 例 的 方法 。 

(4) 通过 对 论述 题 的 深入 分 析 和 讨论 ,逐步 熟悉 和 掌握 软件 测试 的 基本 方法 。 


6.9.2 工具 /准备 工作 


在 开始 本 实验 之 前 ,请 认真 阅读 课程 的 相关 内 容 。 
需要 准备 一 台 带 有 浏览 器 、 能 够 访问 因特网 的 计算 机 。 


6.9.3 ”实验 内 容 与 步骤 


1) 概念 理解 。 
(1) 查阅 有 关 资 料 ,根据 你 的 理解 和 看 法 ,请 给 出 “静态 测试 方法 ”的 定义 : 
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(2) 查阅 有 关 资 料 ,根据 你 的 理解 和 看 法 ,请 给 出 “动态 测试 方法 ”的 定义 : 


(3) 查阅 有 关 资 料 ,根据 你 的 理解 和 看 法 ,请 给 出 “ 白 盒 测试 方法 ”的 定义 : 


(4) 查阅 有 关 资 料 ,根据 你 的 理解 和 看 法 ,请 给 出 “ 黑 盒 测试 方法 ”的 定义 : 


2) 一 个 系统 的 登录 操作 规格 说 明 如 下 : 

登录 对 话 框 有 2 个 数据 输入 : 用 户 名 和 密码 ,登录 操作 对 两 个 输入 数据 进行 检查 ,要 
求 用 户 名 中 只 能 包含 字母 和 数字 (字母 不 区 分 大 小 写 ) ,密码 可 以 包含 任何 字符 ,用 户 名 和 
密码 都 不 能 为 空 且 长 度 不 限 。 当 用 户 名 或 密码 为 空 时 , 则 登录 失败 并 提示 对 应 的 出 错 信 
息 ; 当 用 户 名 不 正确 或 用 户 名 不 存在 或 密码 错误 时 , 则 登录 失败 并 提示 以 下 3 种 相应 的 出 
错 信息 : 用 户 名 不 合法 ( 即 包含 有 非 字 母 非 数字 字符 ) ,或 用 户 名 不 存在 ,或 密码 错误 ; 当 
用 户 名 和 密码 都 正确 时 则 显示 登录 成 功 信息 ,完成 登录 。 

假设 正确 的 用 户 名 是 : abcd123 ,密码 是 123456。 

使 用 等 价 类 方法 为 上 述 规格 说 明 设计 等 价 类 表 和 测试 用 例 。 

答 ， 

(1) 设计 等 价 类 ( 填 人 下 表 ) 


输入 条 件 有 效 等 价 类 无 效 等 价 类 


用 户 名 输入 


密码 输入 


138| 


测试 传统 应 用 系统 


(2) 编写 测试 用 例 ( 填 人 下 表 ) 


测试 用 例 


编号 测试 目的 输入 数据 /执行 步骤 预期 结果 实际 结果 


办 -攻关 


~ 
和 


oo 
2 


2 
人 


a 
六 


” 
ww 


[tl SR 


oo 


a 


3) 分 析 测 试用 例 。 

下 面 是 4 个 有 故障 的 程序 ,每 个 包含 了 一 个 以 失败 为 结果 的 测试 用 例 。 请 分 析 每 段 
程序 并 回答 问题 。 

示例 程序 1: 

Public int findrast (int []x, int y) { 

// effects: if w==null throw Nul1]FointerPxcepticn 

// else retum the index of the last element 

// inx that equalsy. 
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// if no such element exists, retum 一 1 
for (int i=x.length- 1; i> 0; i--) 
L 

过 位 上 = 功 

{ 

retum i; 

} 
} 
retum 一 17 
/测试 值 :二 [2, 3, 5]; 于 2 
// 期 望 值 =0 


答 : 
a) 确定 故障 : 


b) 是 否 可 能 : 口 是 否 ; 
如 果 是 ,所 确定 的 一 个 不 会 执行 故障 的 测试 用 例 是 : 


c) 是 否 可 能 : 口 是 口 否 ; 
如 果 是 ,所 确定 的 一 个 执行 故障 但 不 会 导致 错误 状态 的 测试 用 例 是 : 


d) 是 否 可 能 : 口 是 口 否 ; 
如 果 是 ,所 确定 的 一 个 导致 错误 而 不 是 失败 的 测试 用 例 是 : 


提示 : 别 忘记 程序 计数 器 ,下 同 。 
e) 对 于 给 定 的 测试 用 例 ,确定 第 一 个 错误 状态 ,并 确保 描述 完整 的 状态 。 


f) 修改 故障 并 且 验 证 给 定 的 测试 现在 可 以 产生 一 个 期 望 的 输出 。 


示例 程序 2: 


piblic static int lastZero (int[]x) { 
// effects: if ==null throw NullPointerFxosption 
// else retum the index of the last 0 inx 
// retum -1 if 0 does not occur in x. 
for (int i=0;.i<x.length; i++) 
{ 
证 (x[i]==0) 
{ 
retum i; 
, 


retum 一 17 

} 
/1/ 测试 值 :二 [0, 1, 0] 
I/ 期 望 值 =2 


答 : 
a) 确定 故障 : 
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b) 是 否 可 能 : 口 是 否 ; 
如 果 是 ,所 确定 的 一 个 不 会 执行 故障 的 测试 用 例 是 : 


c) 是 否 可 能 : 口 是 口 否 ; 
如 果 是 ,所 确定 的 一 个 执行 故障 但 不 会 导致 错误 状态 的 测试 用 例 是 : 


d) 是 否 可 能 : 口 是 口 否 ; 
如 果 是 ,所 确定 的 一 个 导致 错误 而 不 是 失败 的 测试 用 例 是 : 


e) 对 于 给 定 的 测试 用 例 ,确定 第 一 个 错误 状态 ,并 确保 描述 完整 的 状态 。 


f) 修改 故障 并 且 验 证 给 定 的 测试 现在 可 以 产生 一 个 期 望 的 输出 。 


示例 程序 3: 


Public int oountPositive(int []x) { 
// effects: if ==null throw NullPointerFxosption 
// else retum the nrber of 
// ”Positive element in x. 

int count= 0; 

for (int i=0; i<x.length; i++) 

{ 

if (x[i]>=0) 


Count++ 


retum count; 

} 
// 测试 值 := [- 4, 2, 0, 2] 
1/ 期 望 值 =2 


答 : 
a) 确定 故障 : 


b) 是 否 可 能 : 口 是 否 ; 
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如 果 是 ,所 确定 的 一 个 不 会 执行 故障 的 测试 用 例 是 : 


c) 是 否 可 能 : 口 是 口 否 ; 
如 果 是 ,所 确定 的 一 个 执行 故障 但 不 会 导致 错误 状态 的 测试 用 例 是 : 


d) 是 否 可 能 : 口 是 口 否 ; 
如 果 是 ,所 确定 的 一 个 导致 错误 而 不 是 失败 的 测试 用 例 是 : 


e) 对 于 给 定 的 测试 用 例 , 确 定 第 一 个 错误 状态 ,并 确保 描述 完整 的 状态 。 


f) 修改 故障 并 且 验 证 给 定 的 测试 现在 可 以 产生 一 个 期 望 的 输出 。 


示例 程序 4: 


Public static int oddorPos (int[]x) { 
// effects: if x==null throw NullPointerExosption 
// else retum the ninber of elements in x that 
LA/ are either odd or positive (or both) 
int count=0 
for (int i=0; i<x.length; i++) 
4 
if (x[i]%2==1 || x[i]>0) 
{ 
Count++ 
} 
} 
retum oount; 
} 
// 测试 值 := [-3, -2, 0, 1 9 
六 期 望 值 =3 


答 ， 
a) 确定 故障 : 


b) 是 否 可 能 : 口 是 否 ; 
如 果 是 ,所 确定 的 一 个 不 会 执行 故障 的 测试 用 例 是 : 


c) 是 否 可 能 : 口 是 否 ; 
如 果 是 ,所 确定 的 一 个 执行 故障 但 不 会 导致 错误 状态 的 测试 用 例 是 : 


d) 是 否 可 能 : 口 是 口 否 ; 
如 果 是 ,所 确定 的 一 个 导致 错误 而 不 是 失败 的 测试 用 例 是 : 


测试 传统 应 


e) 对 于 给 定 的 测试 用 例 , 确 定 第 一 个 错误 状态 ,并 确保 描述 完整 的 状态 。 


f) 修改 故障 并 且 验 证 给 定 的 测试 现在 可 以 产生 一 个 期 望 的 输出 。 


4) 针对 以 下 C 语言 程序 ,请 按 要 求 回答 问题 。 
已 知 weekday. c 源 程序 如 下 : 


# include< stidio.h > 
#include< conio.h > 
/* 主 函数 * / 
int main() 
{ 
char letter; 
Printf( "please input the first letter, "Y" to exit!\n"); 
while ( ( letter=getch() ) 上 ="Y" ) // 当 输 入 字母 为 Y 时 结束 
总 
switch( letter ) 
{ 
Case 'S'; 
Printf( %c \n", letter ); 
printf( "please input second letter \n" ); ”// 输入 第 二 个 字母 
if ( (letter- getch() )== "a' ) 
Printf( "Saturday \n" ); 
else if ( letter= 'u' ) 
Print ( "Sunday \n" ); 
else Printf( 'data error \n ); 
break; 
Case 'F'; 
Printf( "fridayn" ); 
break; 
Case M'; 
Printf( "mondayha" ); 
break; 
case 'T'; 
Printf (Sc \n"; letter ); 
printf( "please input second letter \a" ); // 输入 第 二 个 字母 
if ( (letter=getch() )=="u" ) 
Printf ( "Tuesday \n" ); 
else if ( letter== 'h' ); 
Printf( "Thursday \n" ); 
break; 
Case W'; 


Printf( "Wednesday \n" ); 
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独立 测试 路 径 : [pathl 


[path10] 
[pathl1] 
[path12] 
[path13] 


(2) 设计 一 组 测试 用 例 , 使 main 函数 的 语句 覆盖 率 尽 量 达到 100% 。 


pathl : 


path2 : 


path3 : 


path4 : 


path5 : 


path6 : 


path7 : 


path8 : 


输入 数据  : 
预期 输出 结果 : 
输入 数据 。 : 
预期 输出 结果 : 
输入 数据 
预期 输出 结果 : 
输入 数据 
预期 输出 结果 : 
输入 数据 
预期 输出 结果 : 
输入 数据 
预期 输出 结果 : 
输入 数据 
预期 输出 结果 : 
输入 数据 
预期 输出 结果 : 
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path9: 输入 数据 
预期 输出 结果 : 
path10: 输入 数据 
预期 输出 结果 : 
path11: 输入 数据 
预期 输出 结果 : 
path12: 输入 数据 
预期 输出 结果 : 
path13: 输入 数据 
预期 输出 结果 : 


(3) main 函数 的 语句 覆盖 率 能 否 达 到 100% ,如 果 认 为 无 法 达到 , 需 说 明 原因 。 


6.9.4 实验 总 结 


6.9.5 实验 评价 (教师 ) 


6.10 阅读 与 分 析 : 生动 的 测试 案例 


区 分 单元 测试 与 系统 测试 的 一 个 最 好 的 例子 是 声名 狼藉 的 奔腾 错误 。1994 年 英 特 
尔 公 司 推出 奔腾 微 处 理 器 ,而 几 个 月 之 后 ,弗吉尼亚 州 Lynchburg 大 学 的 一 名 数学 家 
Thomas Nicely 就 发 现 对 于 某 些 浮 点 除法 运算 ,该 芯片 会 给 出 错误 的 运算 结果 。 

芯片 对 于 某 些 数字 的 组 合 会 有 微小 的 不 精确 性 ,英特尔 声称 (可 能 是 真 的 ) 只 有 90 亿 
分 之 一 的 除法 运算 会 出 现 精 确 度 降低 的 问题 。 这 个 错误 是 由 于 除法 算法 所 用 到 的 一 个 含 
有 1066 个 数值 的 表 中 有 5 个 数据 遗漏 。 这 5 个 输入 地 址 应 该 包含 常数 十 2, 而 事实 上 这 
5 个 输入 地 址 没有 初始 化 而 用 0 代替 了 。 麻 省 理工 学 院 的 数学 家 Edelman 称 “ 奔 腾 的 这 
个 错误 是 个 很 容易 犯 的 错误 ,但 是 很 难 捕捉 ”, 一 个 有 关 遗 漏 某 个 基本 点 的 分 析 。 在 系统 
测试 中 这 是 很 难 被 发 现 的 ,而 事实 上 ,英特尔 声称 用 这 个 表 进 行 了 数 百 万 次 的 测试 。 但 是 
表 中 这 5 个 输入 地 址 仍 被 留 空 , 这 是 由 于 一 个 循环 的 退出 条 件 没 有 写 对 , 即 在 循环 完成 之 
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前 就 停止 了 存储 数据 的 操作 。 这 在 单元 测试 中 其 实 是 很 容易 发 现 的 ,分 析 显 示 几 乎 任何 
单元 级 覆盖 标准 都 能 找到 这 个 数 百 万 美元 的 错误 。 这 个 奔腾 错误 事件 不 仅 印证 了 测试 级 
别 间 的 差异 ,而 且 也 最 有 力 地 说 明了 应 该 给 予 单元 测试 更 多 的 关注 。 没 有 捷径 可 走 一 一 
软件 的 方方面面 都 需要 测试 。 

另 一 方面 ,有 些 错 误 只 能 在 系统 级 被 发 现 。 一 个 生动 的 例子 就 是 第 一 颗 Ariane 5 火 
匡 的 发 射 失败 。1996 年 6 月 4 日 ,火箭 在 升 空 37 秒 后 发 生 爆 炸 。 深 层 的 原因 是 一 个 惯 
性 制导 系统 功能 中 一 个 浮 点 转换 异常 没有 进行 处 理 。 事 实 上 ,在 Ariane 4 火箭 系统 中 使 
用 这 个 制导 系统 永远 不 会 发 生 这 样 的 异常 。 也 就 是 说 ,在 Ariane 4 上 ,这 个 制导 系统 功 
能 是 正确 的 。Ariane 5 的 开发 人 员 理 所 当然 想 要 复 用 Ariane 4 的 这 个 成 功 的 惯性 制导 系 
统 , 但 是 没有 人 根据 Ariane 5 与 Ariane 4 实质 上 不 同 的 飞行 轨道 进行 重新 分 析 。 并 且 应 
该 能 发 现 这 个 问题 的 系统 测试 在 技术 上 很 难 实现 ,因而 就 没有 执行 。 后 果 是 惨烈 的 ,代价 
是 巨大 的 ! 

另 一 个 众所周知 的 失败 案例 是 1999 年 9 月 的 火星 登陆 者 (Mars lander) ,由 于 两 个 
独立 软件 团队 分 别 开 发 的 两 个 模块 间 对 度量 单位 的 理解 不 一 致 造成 了 它 的 险 毁 。 一 个 模 
块 是 英制 单位 计算 推进 器 数据 的 ,并 将 它 传 给 另 一 个 模块 ,而 另 一 个 模块 所 期 望 的 数据 是 
以 公制 单位 计算 的 。 这 是 一 个 很 典型 的 集成 错误 (但 这 个 案例 无 论 是 在 资金 还 是 在 声誉 
方面 都 付出 了 高 昂 的 代价 ) 。 

资料 来 源 : ( 美 )Paul Ammann, Jeff Offutt 著 ,人 (软件 测试 基础 》, 机 械 工业 出 版 社 ,2010 年 ,此 处 有 
删改 。 
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第 7 章 单元 测试 技术 


按 阶段 进行 测试 是 一 种 基本 的 测试 策略 。 以 软件 工程 的 观点 看 ,软件 测试 一 般 分 为 
单元 测试 集成 (组 装 ) 测 试 、 确 认 ( 配 置 项 ) 测 试 等 步骤 。 在 测试 过 程 中 应 该 依据 每 个 阶段 
的 不 同 特点 ,采用 不 同 的 测试 方法 和 技术 ,制定 不 同 的 测试 目标 。 在 单元 测试 中 , 主要 采 
用 和 白 盒 测试 方法 ,包括 对 代码 的 评审 .静态 测试 和 结合 测试 工具 进行 的 动态 测试 。 


7.1 单元 测试 的 定义 


单元 测试 (也 称 模块 测试 或 分 调 ) 是 测试 执行 过 程 中 的 第 一 个 阶段 。 通 常 ,软件 系统 
是 由 许多 单元 构成 的 ,这 些 单 元 可 能 是 一 个 对 象 一 个 类 一 个 函数 ,也 可 能 是 一 个 更 大 的 
单元 ,例如 组 件 或 模块 等 。 单 元 测试 的 对 象 是 可 独立 编译 或 汇编 的 程序 模块 (或 称 为 软件 
构件 或 在 面向 对 象 设计 中 的 类 ), 其 目的 是 检查 每 个 软件 单元 能 否 正确 地 实现 设计 说 明 中 
的 功能 \ 性 能 ,接口 和 其 他 设计 约束 等 要 求 , 发 现 单元 内 可 能 存在 的 各 种 差错 。 要 保证 软 
件 系统 的 质量 ,首先 就 要 保证 构成 系统 的 单元 的 质量 ,也 就 是 要 进行 充分 的 单元 测试 。 

单元 测试 通常 被 认为 是 编码 阶段 工作 的 一 部 分 。 可 以 在 编码 开始 之 前 或 源 代码 生成 
之 后 进行 单元 测试 的 设计 。 设 计 信息 的 评审 可 以 指导 建立 测试 用 例 , 以 发 现 各 类 错误 。 
每 个 测试 用 例 都 应 与 一 组 预期 结果 联系 在 一 起 。 

单元 测试 活动 强调 被 测试 对 象 的 独立 性 ,避免 其 他 单元 对 该 单元 的 影响 。 这 样 就 缩 
小 了 问题 分 析 的 范围 ,而 且 可 以 比较 彻底 地 消除 各 个 单元 中 所 存在 的 问题 ,避免 以 后 功能 
测试 和 系统 测试 时 间 题 查找 的 困难 。 

单元 测试 一 般 应 符合 以 下 技术 要 求 : 

(1) 对 软件 技术 文档 规定 的 软件 单元 的 功能 性能、 接口 等 应 逐 项 进行 测试 ; 

(2) 每 个 软件 特性 应 至 少 被 一 个 正常 测试 用 例 和 一 个 被 认可 的 异常 测试 用 例 所 覆盖 ; 

(3) 测试 用 例 的 输入 至 少 包括 有 效 等 价 类 值 .无效 等 价 类 值 和 边界 数据 值 ; 

(4) 在 对 软件 单元 进行 动态 测试 之 前 ,一 般 应 先 对 软件 单元 的 源 代 码 进行 静态 测试 

(5) 语句 履 盖 率 和 分 支 覆 盖 率 均 达 到 100%; 

(6) 对 输出 数据 及 其 格式 进行 测试 。 

对 具体 的 软件 单元 ,可 根据 软件 测试 合同 (或 项 目 计划 ) 以 及 软件 单元 的 重要 性 、 完 整 
性 级 别 等 要 求 对 上 述 内 容 进行 裁剪 。 


7.2 单元 测试 的 内 容 


单元 测试 由 程序 开发 人 员 和 测试 人 员 共 同 完成 ,经 过 设计 、 脚 本 开发 ,执行 .调试 和 分 
析 结 果 等 几 个 过 程 。 


《 款 件 测试 技术 与 实践) 


单元 测试 的 目标 是 确保 模块 被 正确 地 编码 ,应 该 对 程序 的 每 一 个 模块 进行 独立 测 
试 。 依 据 详细 设计 的 说 明 测试 重要 的 控制 路 径 ,力求 在 模块 范围 内 发 现 错误 。 由 于 单 
元 测试 的 目的 是 找 出 与 模块 的 内 部 逻辑 有 关 的 错误 ,因此 ,单元 测试 一 般 采 用 静态 测 
试 方法 和 动态 测试 方法 ,并 以 白 盒 法 为 主 , 辅 以 黑 盒 测试 方法 ,通常 静态 测试 先 于 动态 
测试 进行 , 且 可 以 多 个 模块 平行 进行 。 在 单元 测试 中 ,一 般 同时 还 对 模块 接口 、 局 部 数 
据 接 口 进行 测试 。 

当 进 行 静态 测试 时 ,所 测试 的 内 容 与 选择 的 测试 方法 有 关 。 如 : 采用 代码 审查 方法 ， 
通常 要 对 寄存 器 的 使 用 ( 仅 限定 在 机 器 指令 和 汇编 语言 时 考虑 ) ,程序 格式 、 入 口 和 出 口 的 
连接 ,程序 语言 的 使 用 、 存 储 器 的 使 用 等 内 容 进行 检查 ;采用 静态 分 析 方 法 ,通常 要 对 软件 
单元 的 控制 流 、 数 据 流 、 接 口 、 表 达 式 等 内 容 进行 


分 析 。 驱动 模块 | 接口 
— 局 部 数据 结构 
进行 动态 测试 时 ,通常 对 软件 单元 的 功能 、 性 局 名 区 
能 、 接 口 \ 局 部 数据 结构 、 独 立 路 径 、 出 错 处 理 . 边 界 [流民 志 ] 儿 立 由 径 
条 件 和 内 存 使 用 情况 进行 测试 。 对 软件 单元 接口 、[ 王 攻 | [ 视 Wi 


的 测试 通常 先 于 其 他 内 容 的 测试 。 对 具体 的 软件 
单元 ,应 根据 软件 测试 合同 (或 项 目 计 划 )、 软 件 设 
计 文 档 的 要 求 及 选择 的 测试 方法 确定 测试 的 具体 
内 容 。 

单元 测试 环境 如 图 7-1 所 示 。 


7.3 ”驱动 程序 和 桩 程序 


单元 测试 除了 功能 性 之 外 ,还 要 确保 代码 在 结构 上 可 靠 、 健 全 并 且 能 够 有 良好 的 响 
应 ,这 就 需要 运行 单元 ,进行 动态 测试 ,以 验证 业务 逻辑 和 单元 的 实际 表现 行为 。 由 于 构 
件 并 不 是 独立 的 程序 ,为 运行 被 测试 单元 ,需要 根据 其 接口 ,开发 相应 的 驱动 程序 和 (或 ) 
桩 程序 。 

在 大 多 数 情况 下 ,驱动 程序 只 是 一 个 “ 主 程序 ”, 它 接收 测试 用 例 数据 ,将 这 些 数 据 传 
递 给 (将 要 测试 的 ) 构 件 , 并 打印 相关 结果 。 而 桩 程序 的 作用 是 代替 那些 从 属于 被 测 构件 
(或 被 其 调用 ) 的 模块 ,提供 入 口 的 验证 ,并 将 控制 返回 到 被 测 模块 。 

驱动 程序 和 桩 程序 都 意味 着 测试 开销 。 也 就 是 说 ,两 者 都 是 必须 编写 的 软件 (通常 并 
没有 使 用 正式 的 设计 ) ,但 并 不 与 最 终 的 软件 产品 一 起 交付 。 若 驱动 程序 和 桩 程序 保持 简 
单 ,实际 开销 就 会 比较 低 。 遗 憾 的 是 ,使 用 “简单 ”的 驱动 程序 和 桩 程序 ,许多 构件 是 不 能 
完成 充分 的 单元 测试 的 。 在 这 种 情况 下 ,完整 的 测试 可 以 延迟 到 集成 测试 这 一 步 ( 这 里 也 
要 使 用 驱动 程序 和 桩 程序 ) 。 

当 设 计 高 内 聚 的 构件 时 ,就 可 以 简化 单元 测试 。 当 构件 只 强调 一 个 功能 时 ,测试 用 例 
数 就 会 降低 , 且 比较 容易 预见 错误 和 发 现 错误 。 


| 开动 杭 块 | 


| 


测试 用 例 


结 


图 7-1 单元 测试 环境 
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单元 测试 技术 


7.4 单元 测试 过 程 


单元 测试 环境 包括 测试 的 运行 环境 和 经 过 认可 的 测试 工具 环境 ,一 般 应 符合 软件 测 
试 合同 (或 项 目 计划 ) 的 要 求 ,通常 是 开发 环境 或 仿真 环境 。 

单元 测试 的 基本 过 程 由 以 下 4 个 步骤 组 成 : 

(1) 测试 策划 。 在 详细 设计 阶段 完成 单元 测试 计划 。 

(2) 测试 设计 。 建 立 单元 测试 环境 ,完成 测试 设计 和 开发 。 

(3) 测试 执行 。 执 行 单元 测试 用 例 , 并 详细 记录 测试 结果 。 

(4) 测试 总 结 。 判 定 测试 用 例 是 否 通 过 。 提 交 测 试 文档 。 


7.4.1 测试 策划 


测试 分 析 人 员 一 般 根据 测试 合同 (或 项 目 计 划 ) 和 被 测试 软件 的 设计 文档 对 被 测试 软 
件 单元 进行 分 析 ,并 确定 以 下 内 容 : 

(1) 确定 测试 充分 性 要 求 。 根 据 软 件 单元 的 重要 性 、 软 件 单元 测试 目标 和 约束 条 件 ， 
确定 测试 应 柳 盖 的 范围 及 每 一 范围 所 要 求 的 获 盖 程度 ,如 分 支 获 盖 率 、 语 句 获 盖 率 \ 功 能 
徐 盖 率 等 ,单元 的 每 一 软件 特性 应 至 少 被 一 个 正常 的 测试 用 例 和 一 个 异常 的 测试 用 例 所 
复 盖 。 

(2) 确定 测试 终止 的 要 求 。 指 定 测 试 过 程 正常 终止 的 条 件 , 如 测试 充分 性 是 否 达 到 
要 求 ,确定 导致 测试 过 程 异常 终止 的 可 能 情况 ,如 软件 编码 错误 。 

(3) 确定 用 于 测试 的 资源 要 求 。 包 括 软件 (如 操作 系统 、 编 译 软件 .静态 分 析 软 件 、 测 
试 驱动 软件 ) ,硬件 (如 计算 机 、 设 备 接口 )、 人 员 数 量 、 人 员 技 能 等 。 

(4) 确定 需要 测试 的 软件 特性 。 根 据 设计 文档 的 描述 确定 软件 单元 的 功能 ,性 能 、 状 
态 ,接口 数据 结构 ,设计 约束 等 内 容 和 要 求 。 若 需要 ,将 其 分 类 。 并 从 中 确定 需 测 试 的 软 
件 特性 。 

(5) 确定 测试 需要 的 技术 和 方法 。 如 : 测试 数据 生成 和 验证 技术 。 

(6) 根据 测试 合同 (或 项 目 计划 ) 的 要 求 和 被 测 软 件 的 特点 ,确定 测试 准 出 条 件 。 

(7) 确定 由 资源 和 被 测 软件 单元 所 决定 的 单元 测试 活动 的 进度 。 

(8) 对 测试 工作 进行 风险 分 析 与 评估 ,并 制定 应 对 措施 。 

根据 上 述 分 析 研 究 结果 ,按照 测试 规范 要 求 编写 软件 单元 测试 计划 。 单 元 测试 计划 
在 软件 详细 设计 阶段 完成 ,其 制定 的 主要 依据 是 (软件 需求 说 明 书 》《 软 件 详细 设计 说 明 
书 ) 等 。 同 时 ,要 参考 并 符合 软件 的 整体 测试 计划 。 

单元 测试 计划 的 主要 内 容 包括 测试 时 间 表 、 资 源 分 配 使 用 表 、 测 试 的 基本 策略 和 方 
法 。 例 如 是 否 需要 执行 静态 测试 .是 否 需要 测试 工具 是否 需要 编制 驱动 程序 和 桩 程 
序 等 。 

应 对 软件 单元 测试 计划 进行 评审 。 评 审 测试 的 范围 和 内 容 、 资 源 、 进 度 等 是 否 明确 ， 
测试 方法 是 否 可 行 ,风险 的 分 析 、 评 估 与 对 策 是 否 可 行 .测试 文档 是 否 符 合 规范 ,测试 活动 
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是 否 独立 。 一 般 情 况 下 ,由 软件 的 供 方 自行 组 织 评审 。 在 单元 测试 计划 通过 评审 后 ,进入 
下 一 步 天 作 < 

单元 测试 计划 完成 后 ,并 不 是 立刻 进行 单元 测试 ,这 个 时 候 代码 可 能 还 未 完成 。 在 代 
码 编制 时 软件 详细 设计 文档 有 可 能 发 生变 化 ,要 及 时 更 新 (单元 测试 计划 》, 并 对 其 进行 
评审 。 


7.4.2 测试 设计 

软件 单元 测试 的 设计 工作 由 测试 设计 人 员 和 测试 程序 员 完成 。 一 般 根据 软件 单元 测 
试 计划 完成 以 下 工作 : 

(1) 设计 测试 用 例 。 将 需 测 试 的 软件 特性 分 解 ,针对 分 解 后 的 每 种 情况 设计 测试 
用 例 。 

(2) 获取 测试 数据 。 包 括 获 取现 有 的 测试 数据 和 生成 新 的 数据 ,并 按照 要 求 验证 所 
有 数据 。 

(3) 确定 测试 顺序 。 可 从 资源 约束 .风险 以 及 测试 用 例 失 效 造 成 的 影响 或 后 果 等 方 
面 考虑 。 


(4) 获取 测试 资源 。 从 现 有 工具 中 选 定 或 者 开发 支持 测试 的 软件 和 硬件 。 

(5) 编写 测试 程序 。 包 括 开 发 测试 支持 工具 ,单元 测试 的 驱动 模块 和 桩 模块 。 

(6) 建立 和 校准 测试 环境 。 

(7) 按照 测试 规范 要 求 编写 软件 单元 测试 说 明 。 

应 对 软件 单元 测试 说 明 进 行 评审 。 评 审 测试 用 例 是 否 正确 、 可 行 和 充分 ,测试 环境 是 
否 正确 、 合 理 , 测 试 文档 是 否 符合 规范 。 通 常 由 软件 测试 方 自行 组 织 单元 测试 的 评审 , 通 
过 评审 后 ,进入 下 一 步 工 作 。 

设计 阶段 的 主要 任务 是 单元 测试 用 例 的 设计 编写 、 驱 动 程序 和 桩 程序 的 设计 及 代码 
编制 ,单元 测试 用 例 是 测试 效率 和 质量 的 重要 保证 。 许 多 大 型 软件 公司 对 测试 用 例 运用 
数据 库 进 行 管理 。 测 试用 例 在 执行 阶段 也 要 不 断 地 完善 和 更 新 。 


7.4.3 测试 执行 


执行 测试 的 工作 由 测试 员 和 测试 分 析 员 完 成 。 

软件 测试 员 的 主要 工作 是 按照 单元 测试 计划 和 单元 测试 说 明 的 内 容 和 要 求 执行 测 
试 。 单 元 测试 计划 是 整个 单元 测试 的 核心 ,在 测试 过 程 中 ,认真 观察 并 填写 测试 记录 。 

测试 分 析 员 的 工作 主要 有 如 下 两 方面 : 

(1) 根据 每 个 测试 用 例 的 期 望 测试 结果 、 实 际 测试 结果 和 评价 准则 判定 该 测试 用 例 是 
否 通 过 ,并 记录 结果 。 如 果 测 试用 例 不 通过 ,应 分 析 情 况 , 并 根据 不 同情 况 采 取 相应 措施 。 

(2) 当 所 有 的 测试 用 例 执行 完毕 ,测试 分 析 员 要 根据 测试 的 充分 性 要 求 和 失效 记录 ， 
确定 测试 工作 是 否 充分 ,是 否 需 要 增加 新 的 测试 。 当 测试 过 程 正常 终止 时 ,如 果 发 现 测试 
工作 不 足 , 应 对 软件 单元 进行 补充 测试 ,直到 测试 达到 预期 要 求 , 并 将 附加 的 内 容 记 录 在 
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单元 测试 报告 中 。 当 测试 过 程 异常 终止 时 ,应 记录 导致 终止 的 条 件 、 未 完成 的 测试 和 未 被 
修正 的 差错 。 

单元 测试 执行 依据 需求 定义 《详细 设计 说 明 书 ) 来 完成 单元 测试 用 例 的 执行 。 对 测 
试 中 发 现 的 错误 或 缺陷 进行 记录 ,生成 (缺陷 跟踪 报告 ), 将 该 报告 反馈 给 开发 人 员 及 时 
修改 。 

如 果 需 进行 静态 测试 ,还 要 用 到 相应 的 标准 和 规范 文档 ,制定 (代码 审查 检查 表 》。 


7.4.4 测试 总 结 


测试 分 析 员 应 根据 被 测试 软件 设计 文档 、 单 元 测试 计划 、 单 元 测试 说 明 测试 记录 和 
软件 问题 报告 单 等 ,对 测试 工作 进行 总 结 。 一 般 应 在 单元 测试 报告 中 记录 以 下 内 容 : 

(1) 总 结 单元 测试 计划 和 单元 测试 说 明 的 变化 情况 及 其 原因 ; 

(2) 对 测试 异常 终止 情况 ,确定 未 能 被 测试 活动 充分 覆盖 的 范围 ; 

(3) 确定 未 能 解决 的 软件 测试 事件 以 及 不 能 解决 的 理由 ; 

(4) 总 结 测试 所 反映 的 软件 单元 与 软件 设计 文档 之 间 的 差异 ; 

(5) 将 测试 结果 连同 所 发 现 的 出 错 情况 同 软件 设计 文档 对 照 ,评价 单元 的 设计 与 实 
现 ,提出 软件 改进 建议 ; 

(6) 按照 测试 规范 的 要 求 编写 单元 测试 报告 ,内 容 包括 测试 结果 分 析 、 对 单元 的 评价 
和 建议 ; 

(7) 根据 测试 记录 和 软件 问题 报告 单 编 写 测试 问题 报告 。 

应 对 测试 执行 活动 .软件 单元 测试 报告 ,测试 记录 和 测试 问题 报告 进行 评审 。 评 审 测 
试 执行 活动 的 有 效 性 、 测 试 结果 的 正确 性 和 合理 性 。 评 审 是 否 达到 了 测试 目的 、 测 试 文档 
是 否 符合 规范 。 一 般 情况 下 ,评审 由 软件 测试 方 自行 组 织 。 


7.4.5 测试 文档 


软件 单元 测试 完成 后 形成 的 文档 一 般 应 有 : 软件 单元 测试 计划 、 软 件 单 元 测试 说 明 、 
软件 单元 测试 报告 .软件 单元 测试 记录 和 软件 单元 测试 问题 报告 。 可 根据 需要 对 上 述 文 
档 及 文档 的 内 容 进行 裁剪 。 

在 软件 测试 的 其 他 各 个 阶段 ,如 集成 测试 .配置 项 测试 ,系统 测试 .验收 测试 和 回归 测 
试 等 ,在 测试 完成 的 时 候 都 需要 提交 上 述 测试 文档 。 其 中 ,回归 测试 阶段 的 文档 也 可 分 别 
作为 单元 测试 .集成 测试 .配置 项 测试 和 系统 测试 所 产生 文档 的 补充 件 。 限 于 教材 篇 幅 ， 
后 面 就 不 再 一 一 列举 。 


7.5 单元 测试 的 评估 


除了 代码 的 标准 和 规范 ,单元 测试 中 通常 主要 考虑 的 是 对 结构 的 测试 和 测试 用 例 的 
覆盖 率 。 在 某 种 意义 上 说 ,测试 用 例 设 计 决 定 了 测试 结果 是 否 通过 。 单 元 测试 的 一 般 准 
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则 表述 如 下 : 
(1) 软件 单元 功能 与 设计 需求 一 致 
(2) 软件 单元 接口 与 设计 需求 一 致 
(3) 能 够 正确 处 理 输入 和 运行 中 的 错误 。 
(4) 在 单元 测试 中 发 现 的 错误 已 经 得 到 修改 并 且 通 过 了 测试 。 
(5) 达到 了 相关 的 覆盖 率 的 要 求 。 
(6) 完成 软件 单元 测试 报告 。 
有 时 也 会 借助 (单元 测试 检查 表 》( 见 图 7-2) 对 单元 测试 进行 评估 。 


示例 : 单元 测试 检查 表 


单元 名 称 系统 构造 
任务 编号 初次 测试 日 期 


关键 测试 项 是 否 已 纠正 : 

.有 无 任何 输入 参数 没有 使 用 ? 有 无 任何 输出 参数 没有 产生 ? 

. 有 无 任何 数据 类 型 不 正确 或 不 一 致 ? 

.有 无 任何 算法 与 功能 需求 中 的 描述 不 一 致 ? 

.有 无 任何 局 部 变量 使 用 前 没有 初始 化 ? 

.有 无 任何 外 部 接口 编码 错误 ? 即 调用 语句 \ 文 件 存 取 ,数据 库 错误 。 
.有 无 任何 逻辑 路 径 错误 ? 

. 该 单元 是 否 有 多 个 人 口 或 多 个 正常 的 出 口 ? 

额外 测试 项 : 

8. 该 单元 中 有 任何 地 方 与 PDL 中 的 描述 不 一 致 ? 

9. 代码 中 有 无 任何 偏离 本 项 目标 准 的 地 方 ? 

10. 代码 中 有 无 任何 对 于 用 户 来 说 不 清楚 的 错误 提示 信息 ? 

11. 如 果 该 单元 是 设计 为 可 重用 的 ,代码 中 是 否 有 可 能 妨碍 重用 的 地 方 ? 采取 的 动作 和 说 明 


Do eeb 


审查 结果 : 

1. 如 果 上 述 11 个 问题 的 答案 均 为 “ 否 ”, 那 么 测试 通过 ,请 标记 并 签名 。 

2. 如 果 代 码 存 在 严重 问题 ,例如 多 个 关键 问题 的 答案 为 “是 ”, 那 么 程序 编制 者 纠正 这 些 错 误 , 并 
须 重新 安排 一 次 单元 测试 。 

下 一 次 单元 测试 的 日 期 : 

3. 如 果 代 码 存 在 小 缺陷 ,那么 程序 编制 者 纠正 这 些 错 误 , 并 且 仲 裁 者 必须 安排 一 次 跟踪 会 议 。 


跟踪 会 议 的 日 期 : 
测试 人 签名 : 日 期 : 


图 7-2 单元 测试 检查 表示 例 


测试 总 结 包 括 测试 完备 性 评估 和 代码 覆盖 率 评估 。 进 行 评估 的 依据 是 (单元 测试 用 
例 》《 缺 陷 跟踪 报告 ) 等 。 评 估 的 目的 是 帮助 判定 单元 测试 是 否 足 够 ,对 该 单元 的 质量 给 
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予 评价 。 
7.6 单元 测试 工具 


单元 测试 一 般 采 用 白 盒 测 试 方法 ,针对 程序 内 部 的 实现 来 完成 测试 ,这 决定 了 其 测试 
工具 和 特定 的 语言 密切 相关 ,所 以 单元 测试 工具 针对 不 同 语言 有 相对 应 的 版 本 ,多 数 集成 
开发 环境 (如 Microsoft Visual Studio Eclipse) 会 提供 单元 测试 工具 ,甚至 提供 测试 驱动 
开发 方法 所 需要 的 环境 ,其 中 最 典型 的 就 是 xUnit 工具 家 族 : 

。 JUnit 是 针对 Java 的 单元 测试 工具 。 

。 CppUnit 是 C++ 单元 测试 工具 。 

。 NUnit 是 C#(. Net) 单 元 测试 工具 。 

。 HtmlUnit、JsUnit、PhpUnit、PerlUnit、XmlUnit 则 分 别 是 针对 HTML、 

JavaScript、.PHP、Perl、XML 的 单元 测试 工具 (框架 ) 。 

此 外 还 有 GoogleTest 单元 测试 框架 (http://code. google. com/p/googletest/), 它 是 
基于 xUnit 架构 的 测试 框架 ,在 不 同 平台 上 (Linux, Mac Os X，Windows，Cygwin， 
Windows CE 和 Symbian) 为 编写 C++ 测试 而 生成 的 ,支持 自动 发 现 测试 .丰富 的 断言 集 、 
用 户 定义 的 断言 death 测试 ,致命 与 非 致命 的 失败 .类 型 参数 化 测试 .各 类 运行 测试 的 选 
项 和 XML 的 测试 报告 等 。 


7.6.1 CheckStyle.PMD 与 FindBug 


为 提高 代码 的 质量 ,除了 要 提高 逻辑 上 的 控制 以 及 业务 流程 的 理解 外 ,代码 本 身 也 存 
在 提高 的 空间 。 检 查 代 码 是 否 完全 符合 编码 规范 ,如 果 全 靠 编 程 人 员 自 行 检 查 , 需 要 很 大 
的 工作 量 。 如 果 使 用 代码 的 静态 检查 工具 (如 CheckStyle、.PMD 与 FindBug) 会 极 大 地 提 
高 效率 。 这 几 个 工具 对 于 规范 代码 ,发 现 潜在 的 错误 是 很 有 效 的 。 

CheckStyle、.PMD 与 FindBug 配置 的 主要 功能 和 特点 见 表 7-1。 

表 7-1 CheckStyle/PMD 与 FindBug 主要 功能 
工 具 目 的 主要 检查 内 容 

主要 检查 bytecode 中 的 bug patterns, 像 NullPoint 


基于 Bug Patterns 概念 ,查找 


FindBug | 空 指针 检查 、 没 有 合理 有 关闭 资源 ,字符 申 相同 关 
javabytecode 中 的 潜在 bug 。 | 断 错 (用 的 是 一 一 ,不 是 用 equals 方法 ) 竺 
主要 包括 ， 
。 空 try/catch/finally/switch 语句 块 
ee 检查 Java 源 文件 中 的 潜在 | 。 未 使 用 的 局 部 变量 ,参数 和 Private 方法 


问题 空 if/while 语句 
过 于 复杂 的 表达 式 ,如 不 必要 的 计 语 句 等 


复杂 类 
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续 表 


工 具 目 的 主要 检查 内 容 


主要 包括 : 

Javadoc 注释 

命名 规范 

多 余 的 Imports 

Size 度量 ,如 过 长 的 方法 
缺少 必要 的 空格 Whitespace 
重复 代码 


检查 Java 源 文 件 是 否 与 代码 


CheckStyle 规范 相符 


7.6.2 开源 单元 测试 工具 


实际 上 ,xUnit 也 是 开源 单元 测试 工具 的 代表 ,还 有 许多 开源 的 单元 测试 工具 可 以 使 
用 。 例 如 ,在 JUnit 基础 上 扩展 的 一 些 工 具 , 如 Boost、Cactus、CUTest JellyUnit、 
JunitperfJunitEE、Pisces 和 QtUnit 等 。 

在 选择 测试 工具 时 ,首先 可 考虑 开源 工具 ,在 工具 源 代码 基础 上 ,结合 自己 特定 的 需 
求 进行 修改 、 扩 展 ,具有 良好 的 定制 性 和 适应 性 。 如 果 开 源 工具 不 能 满足 要 求 , 再 考虑 选 
用 商品 化 工具 。 


7.6.3 商品 化 单元 测试 工具 


Java/PHP/Ruby 等 语言 的 单元 测试 工具 以 开源 工具 为 主 ,而 C/C++ 语言 的 单元 测 
试 工具 以 商品 化 工具 为 主 ,例如 Parasoft C++ 、PR QA. C/C++ .CompuWare DevPartner 
for Visual C++ BoundsChecker Suite、Panorama C++ 等 。 此 外 ,相对 于 开源 工具 ,商品 化 
工具 在 功能 、 易 用 性 、 稳 定 和 技术 支持 等 方面 具有 一 定 的 优势 。 

在 单元 测试 工具 中 ,除了 代码 扫描 工具 (如 Parasoft C++ ) 之 外 ,还 有 其 他 一 些 工 
具 , 如 : 

。 内 存 资源 泄漏 检查 工具 ,如 CompuWare BounceChecker,IBM Rational PurifyPlus。 

。 代码 覆盖 率 检查 工具 ,如 CompuWare TrueCoverage ,IBM Rational PureCoverage， 

TeleLogic Logiscope。 

。 代码 性 能 检查 工具 ,如 Logiscope 和 Macabe。 

针对 Java 语言 的 商品 化 工具 ,代表 产品 是 DevPartner Studio for Java 专业 版 、 
Parasoft C++ Test、Parasoft Jtest、Parasoft TEST 、IBM Rational PurifyPlus 、Straka 
JProbe Suite 和 PR QA.J。 

国内 较 著 名 的 商品 化 单元 测试 工具 如 Visual Unit (简称 VU, http://www. 
kailesoft. cn/) ,是 一 个 可 视 化 单元 测试 工具 ,支持 语句 、 条 件 、 分 支 及 路 径 覆 盖 的 测试 ,使 
用 简单 ,基本 不 需要 编写 测试 代码 。VU 还 增强 调试 器 功能 (如 自由 后 退 . 用 例 切换 ) , 提 
高 调试 的 效率 。 
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7.7 习题 


请 参考 课文 内 容 以 及 其 他 资料 ,完成 下 列 选择 题 。 
(1) 在 软件 测试 用 例 设 计 的 方法 中 ,最 常用 的 方法 是 黑 盒 测试 和 白 盒 测试 ,其 中 不 属 
于 白 盒 测试 所 关注 的 是 (  )。 
A. 程序 结构 B. 软件 外 部 功能 
C. 程序 正确 性 D. 程序 内 部 逻辑 
(2) 下 面 的 叙述 中 不 是 单元 测试 目的 的 是 ( LA 
A. 验证 代码 是 否 与 设计 相符 合 B. 发 现 设计 和 需求 中 存在 的 缺陷 
C. 发 现在 编码 过 程 中 引入 的 错误 。 D. 检查 用 户 接口 是 否 满足 客户 的 需求 
(3) 单元 测试 总 是 最 后 的 、 也 可 能 是 最 重要 的 工作 是 ( Ys 
A. 重要 路 径 测试 B. 错误 处 理 测 试 
C. 边界 测试 D. 接口 测试 
(4) 单元 测试 中 的 主要 测试 方法 为 ( Yi 
A. 黑 盒 测试 B. 灰 盒 测试 C. 回归 测试 D. 和 白 盒 测试 
(5) 单元 测试 的 测试 用 例 设 计 主 要 依据 是 (  )。 
A. 需求 规格 说 明 B. 概要 设计 说 明 
C. 接口 规格 说 明 D. 详细 设计 说 明 
(6) 单元 测试 时 ,调用 被 测 模块 的 是 ( ) 。 
A. 桩 模块 B. 通信 模块 C. 驱动 模块 D. 代理 模块 
(7) 用 QESAT/C 工具 进行 软件 分 析 与 测试 时 ,以 下 说 法 中 错误 的 是 (。”)。 
A. 白 盒 测试 又 称 为 程序 结构 测试 , 它 主 要 进行 程序 逻辑 结构 的 获 盖 测试 
B. 在 进行 测试 之 前 ,必须 先 建立 以 . prj 为 后 组 的 测试 项 目 
C. 被 测 源 文件 可 放 在 任意 目录 下 
D. 进行 软件 静态 分 析 不 必 运 行 被 测 程序 
(8) 软件 测试 中 常用 的 静态 测试 方法 是 ( A ) 和 ( B )。( B ) 用 来 检查 模块 
或 子 程 序 间 的 调用 是 否 正确 。 
分 析 方 法 ( 白 盒 方法 ) 中 常用 的 方法 是 ( C ) 方 法 。 非 分 析 方 法 ( 黑 盒 方法 ) 中 常用 
的 方法 是 ( D ) 方 法 和 ( E ) 方 法 。( 下 ) 方 法 根据 输出 对 输入 的 依赖 关系 设计 


测试 用 例 。 
A、B. Q@ 引用 分 析 加 算法 分 析 @ 可 靠 性 分 析 
@ 效率 分 析 回 接口 分 析 操作 性 分 析 
C~E. 路 径 测试 @ 等 价 类 @ 因果 图 
图 归纳 测试 加 综合 测试 追踪 


Q@ 深度 优先 @ 排 错 @ 相对 图 
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7.8 实验 与 思考 
7.8.1 实验 目的 

本 节 “ 实 验 与 思考 ”的 目的 : 

(1) 熟悉 单元 测试 的 基本 概念 和 单元 测试 操作 的 基本 过 程 。 

(2) 了 解 单元 测试 工具 的 设计 原理 ,了 解 主流 的 单元 测试 工具 。 

(3) 通过 对 论述 题 的 深入 分 析 和 讨论 ,逐步 熟悉 和 掌握 软件 测试 的 基本 方法 。 
7.8.2 工具 /准备 工作 


在 开始 本 实验 之 前 ,请 认真 阅读 课程 的 相关 内 容 。 
需要 准备 一 台 带 有 浏览 器 、 能 够 访问 因特网 的 计算 机 。 


7.8.3 实验 内 容 与 步骤 
1) 概念 理解 。 


请 查阅 有 关 资 料 ,根据 你 的 理解 和 看 法 ,给 出 下 列 概念 的 定义 : 
(1) 单元 测试 : 


(2) 单元 测试 一 般 应 符合 的 技术 要 求 是 : 


四 因 昌 四 昌 日 


2) 请 利用 网 络 搜索 工具 了 解 主流 的 商品 化 单元 测试 工具 ,并 作 简单 介绍 。 
(1) DevPartner Studio 
该 软件 的 官方 网 站 : 


可 以 下 载 到 该 软件 的 相关 网 站 : 


当前 最 新 版 本 : 


简单 介绍 : 


(2) Parasoft C++ Test 
该 软件 的 官方 网 站 : 
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可 以 下 载 到 该 软件 的 相关 网 站 : 


当前 最 新 版 本 : 


单元 测试 技术 


简单 介绍 : 


(3) Parasoft Jtest 


该 软件 的 官方 网 站 : 


可 以 下 载 到 该 软件 的 相关 网 站 : 


当前 最 新 版 本 : 


简单 介绍 : 


(4) Parasoft . Test 
该 软件 的 官方 网 站 : 


可 以 下 载 到 该 软件 的 相关 网 站 : 


当前 最 新 版 本 : 


简单 介绍 


(5) IBM Rational PurifyPlus 
该 软件 的 官方 网 站 : 


可 以 下 载 到 该 软件 的 相关 网 站 : 


当前 最 新 版 本 : 


简单 介绍 : 


(6) Jprobe Suite 
该 软件 的 官方 网 站 : 


可 以 下 载 到 该 软件 的 相关 网 站 : 


当前 最 新 版 本 : 


简单 介绍 : 


(7) PRQA 单元 测试 工具 
该 软件 的 官方 网 站 : 


可 以 下 载 到 该 软件 的 相关 网 站 : 


当前 最 新 版 本 : 


简单 介绍 : 
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(8) 你 在 网 络 搜索 中 了 解 到 的 其 他 单元 测试 工具 
软件 的 名 称 : 

该 软件 的 官方 网 站 : 

可 以 下 载 到 该 软件 的 相关 网 站 : 

当前 最 新 版 本 : 

简单 介绍 : 


满 。 


3) 一 个 栈 (Stack) 对 象 有 3 种 状态 : S1 一 一 栈 空 ; S2 一 一 栈 非 空 也 非 满 ; S3 一 一 栈 
则 各 个 状态 的 条 件 如 下 : 
S1: (t0) 创建 栈 对 象 时 初始 化 ,由 系统 完成 
(t1) 在 S2 状态 下 执行 置 空运 算 setEmpty() 
(t2) 在 S3 状态 下 执行 置 空运 算 setEmpty() 
(t3) 在 S2 状态 下 执行 出 栈 运算 Pop() 
S2:(t4) 在 Sl 状态 下 执行 进 栈 运算 Push() 
(t5) 在 S3 状态 下 执行 出 栈 运算 Pop() 
S3: (t6) 在 S2 状态 下 执行 进 栈 运算 Push() 
为 简化 问题 ,假设 栈 Stack 的 容量 为 2, 栈 元 素 的 数据 类 型 为 整数 。 要 求 : 
(1) 根据 题 意 ,请 在 一 白 纸 上 夯 出 栈 对 象 的 状态 迁移 图 ,并 粘贴 于 此 处 (相关 说 明 请 


标注 于 图 上 )。 


(2) 计算 该 状态 迁移 图 的 MeCabe 环 路 复杂 性 : 判定 该 程序 V(G) 是 


(3) 根据 上 图 ,确定 基本 的 测试 路 径 ( 要 求 测试 路 径 从 Sl 出 发 最 后 回 到 S1, 同 时 在 


状态 转换 时 注 明 转换 条 件 ) 。 
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路 径 1 : 
路 径 2: 
路 径 3: 
路 径 4: 
路 径 5: 
4) 已 知 C 源 程序 如 下 : 


/* Rsimple mailing list example using an array of structures * / 


# incluge< stdio-h > 
# incluqde< stdlib.h > 


Gefine MX 4 


struct agdr { 
Char name [30]; 
char street [40]; 
char city[20]; 
unsigned long int zip; 
} addr list MAX]; 


void init list( void ), enter( void ); 
void deletencdr ( void ), list (void ); 
int menu select( void ), find free( void ); 
int min ( void ) 
{ 

char choioe; 


init list(); /* initialize the structure array * / 
for (27) 1 
choice=menu select(); 
switch( choice ) { 
case 1: enter()7 
break; 
case 2: deletenddr (); 
break; 
case 3: list(); 
break; 


case 4: exit (0); 


retum 0; 


/* Initialize the list * / 
void init list( void ) 
{ 

register int t; 


for (t=0; t< Mx; ++t ) addr list[t ].name[ 0 ]=\0; 


/# Get amenu selection */ 
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int menu select( void ) 
{ 
char a[80]; 
i 
Printf( "1. Enter a name \n" ); 
Printf( "2. Delete a name \n" ); 
Printf( "3. List the file \n" ); 
printf( "4. Quit \n" ); 
oof 
Printf( "\n Enter your choice: " ); 
gets(s)7 
catoi(s); 
}while(c1|| 4); 
retum c; 


/* Input addresses into the list. * / 
void enter( void ) 
有 

int slot; 

char s[80]; 


slot= fine free(); 

if (slot==-1) { 
Printf( "AnList Full" ); 
retum; 


Printf ( "Enter name:" ); 

gets( addr list[ slot ], name ); 

Printf ( "Enter street: " ); 
gets( addr list[ slot ] .street ); 

Printf( "Enter city: " ); 

gets( addr list[ slot ] .city ); 

Printf( "enter zip: " ); 

gets(3); 

addr list[ slot ] .zip= strtoul( s, \0, 10); 


/# Find an unused structure. */ 
int fine free( void ) 
{ 
register int t; 
for (t=0; adtr list[t ].name[ 0] sg t< MX; ++t ); 


单元 测试 技术 


if (t==MX) retum -1; /#* no slots free */ 
retum t; 

} 

/* Delete anaddress * / 

void deletencdr ( void ) 

{ 
register int slot; 
char s[ 80 ]; 
Print( "Enter record # : 
gets( 3); 
slot=atoi( 3); 


if (slot >=0 && slot< MAX) 
addr list[ slot ] .name[ 0 ]=\0; 


/* Display list on the screen. * / 
{ 
register int t; 
for (t=0; t< MX; ++t ) { 
if (addr list[t ].name[0])1{ 
Printf( % s\n", addr list[t ] .name )7 
Printf( % s\n", addr list[ t ].street ); 
Printf( % s\n", addr list[t ].city ); 
Printf( % s\n", addr list[t ].zip); 


} 
Printf( \n\n" ); 
} 
(1) 请 在 一 白 纸 上 面 出 main 函数 的 控制 流程 图 ,并 粘贴 于 此 处 (相关 说 明 请 标注 于 
图 上 )。 


- 粘贴 处 一 


(2) 设计 一 组 测试 用 例 , 使 该 程序 所 有 函数 的 语句 获 盖 率 尽量 达到 100% 。 
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(3) 如 果 认为 该 程序 的 语句 覆盖 率 无 法 达到 100%% , 需 说 明 原因 。 


7.8.4 实验 总 结 


7.8.5 实验 评价 (教师 ) 


7.9 阅读 与 分 析 : 在 微软 当 软件 开发 测试 工程 师 


背景 资料 : 李 敏 ,2005 年 开始 在 微软 实习 ,半年 后 研究 生 毕 业 成 为 正式 员工 ,先后 经 
历 了 System Center Configuration Manager 2007 以 及 SP1、R2 的 发 布 ,测试 的 领域 涉及 
UI 测 试 .AMT feature 和 安全 测试 等 。 这 篇 短文 ,是 她 分 享 的 一 些 工 作 体会 ,一 来 给 不 熟 
悉 测 试 工作 的 读者 描绘 一 下 在 微软 当 软 件 测试 开发 工程 师 是 怎么 回 事情 ,二 来 “揭秘 ”一 
下 微软 的 职业 发 展 体制 。 

2005 年 秋天 ，, 李 敏 还 在 上 海 交通 大 学 念 研究 生 , 还 有 半年 就 要 毕业 了 。 一 天 ,同学 发 
了 个 链接 给 她 ,是 微软 在 上 海 招聘 实习 生 的 消息 ,职位 的 名 称 叫做 软件 测试 开发 工程 师 
(简称 SDET) ,这 个 职位 对 学 生来 说 还 是 个 新 鲜 玩意 儿 , 没 几 个 人 清楚 具体 情况 ,在 好 奇 
心 的 驱动 和 微软 的 吸引 力 之 下 ,她 投 出 了 简历 。 接 着 她 经 历 了 传说 中 的 微软 “五 轮 面试 ”， 
走出 美 罗 大 厦 的 时 候 已 是 下 午 一 点 ,时 至 今日 她 对 这 个 时 刻 的 印象 只 有 两 个 : 饥 肠 较 较 ， 
大 脑 高 速 运转 。 经 过 一 周 的 焦急 等 待 之 后 ,她 同时 收 到 了 SDET 实习 生 和 正式 员工 的 
offer, 所 在 的 组 是 System Management Server( 也 就 是 System Center Configuration 
Manager 2007 的 上 一 个 版 本 )。 

就 这 样 , 李 敏 开 始 了 在 微软 当 软 件 测试 开发 工程 师 的 旅程 。 

几 个 月 过 去 了 , 当 同 学 好 奇 地 问 起 在 微软 工作 的 感受 和 当 SDET 的 情况 时 ,她 说 了 
自己 的 “微软 测试 初 体验 ”: 


测试 初 体验 一 ”软件 测试 开发 工程 师 很 “奢侈 ”很 “ 酷 ” 


问 起 对 软件 测试 开发 工程 师 的 第 一 印象 是 什么 ,地 的 回答 是 : 提 “ 奢 侈 ” 提 * 酷 ”的 。 
说 到 “奢侈 ”, 先 看 看 一 个 软件 测试 开发 工程 师 的 典型 “测试 财产 清单 ”一 一 一 到 两 
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台 配 置 先进 的 工作 机 ;两 个 21 寸 的 液晶 显示 器 ,一 个 屏幕 用 来 显示 产品 的 界面 , 另 一 个 屏 
幕 用 来 发 bug 或 者 编程 序 ; 再 加 上 实验 宝 里 面 十 几 台 测试 机 器 或 一 个 16G 内 存 的 “ 巨 无 
霸 ”。 如 果 你 需要 测试 Windows Mobile, 那 恭喜 你 了 ,各 式 各 样 的 smart phone、 pocket 
PC 可 以 装 满 一 抽 层 。 经 过 一 段 时 间 的 了 解 后 ,她 也 知道 了 这 样 “奢侈 ”的 配置 一 方面 可 
以 提高 工作 效率 ,更 重要 的 是 让 测试 工程 师 能 够 考虑 到 各 种 复杂 的 配置 以 及 模拟 客户 
环境 。 

说 到 “ 酷 ”, 印 象 中 ,软件 测试 开发 工程 师 总 是 有 机 会 走 在 尝试 各 种 微软 新 技术 、 新 产 
品 的 前 端 ,也 总 是 有 机 会 通过 动手 能 力 来 展示 自己 的 “ 酷 "。 比 如 工程 师 会 把 十 几 台 测试 
机 器 装 成 各 种 各 样 不 同 的 Bench, 操 作 系 统 从 Windows 2000、XP 到 最 新 的 Vista、 
Longhorn 甚至 Windows 7, 从 x86 到 x64, 从 英文 到 德 文 中文, 日文 等 ;微软 最 新 的 产品 
或 尚未 发 布 的 产品 都 可 以 拿 来 “研究 ”一 把 ,比如 Longhorn、Windows 7、Hyper-V 等 ; 虽 
然 不 一 定 考 过 MCSE, 但 是 每 个 人 都 会 配置 DNS.DHCP、AD、network 等 。 


测试 初 体验 二 ”测试 有 时 候 就 像 是 玩 游戏 , 找 问 题 的 能 力 很 重要 


测试 就 像 是 玩 游 戏 , 也 许 你 会 觉得 不 可 思议 。 李 敏 拿 了 道 面试 题 来 打 比 方 ,给 你 一 台 
笔记 本 电脑 ,你 会 怎么 去 测试 它 ? 这 是 一 道 典型 的 开放 式 问 题 , 即 使 是 没有 测试 知识 的 人 
也 可 以 想 出 很 多 的 “测试 用 例 ”。 比 如 检查 笔记 本 的 型 号 颜色 ,硬件 配置 ,屏幕 ,电池 、 操 
作 系 统 等 ,相信 这 是 很 多 人 拿 到 新 买 的 笔记 本 之 后 做 的 第 一 件 事情 ,这 些 多 半 都 属于 常规 
的 正 向 功能 测试 ;还 有 些 人 指出 ,外 观 是 否 小 巧 方便 携带 ,键盘 手感 布局 如 何 ,功能 键 是 不 
是 方便 易 用 ,这 些 人 对 可 用 性 要 求 比较 高 ;还 有 些 会 想到 用 它 来 玩 3D 游戏 看 看 显卡 的 性 
能 怎么 样 ;有 些 人 想到 装 上 Vista、64 位 的 操作 系统 ,这 就 是 兼容 性 方面 的 考虑 ;还 有 人 思 
维 “ 不 走 寻 常 路 ”, 提 出 要 把 笔记 本 放 在 赤道 的 日 照 \、 南 极 的 冰雪 环境 下 试 试 能 不 能 正常 工 
作 , 当 砧板 切切 菜 , 扔 下 楼 看 看 碎 不 碎 , 这 就 是 关于 可 靠 性 和 压力 方面 的 测试 ,有 趣 的 答案 
还 可 以 有 许多 许多 ,只 要 你 去 想 …… 

在 李 敏 的 描述 中 ,软件 测试 开发 工程 师 真 实 的 日 常 工作 跟 答 这 道 题 一 样 的 好 玩 , 只 不 
过 笔记 本 电脑 换 成 了 软件 程序 。 在 拿 到 “笔记 本 电脑 ”之 后 ,会 像 上 面 说 到 的 一 样 开动 脑 
筋 仔细 检查 ,检查 之 前 需要 列 出 想 测试 的 各 个 方面 .策略 、 工 具 、 风 险 以 及 怎么 开展 等 ,这 
称 为 测试 计划 (test plan) ;每 项 具体 的 测试 叫做 测试 用 例 (test case) ,每 个 test case 需要 
列 出 具体 操作 步骤 (steps); 找 出 来 软件 的 缺陷 .问题 等 称 为 bug,bug 中 需要 记录 怎样 去 
重 现 它 , 称 为 重 现 步 骤 (repro steps); 找 bug 的 过 程 中 你 可 以 试图 找 出 根本 原因 在 哪里 、 
甚至 哪 一 行 代码 有 问题 ,这 就 是 debugging。 优 秀 的 软件 测试 开发 工程 师 在 这 个 “ 玩 游 
戏 ? 的 过 程 中 需要 具备 足够 的 好 奇 心 , 想 出 各 种 各 样 的 主意 把 软件 “ 搞 坏 ”, 尽 可 能 地 找 出 
bug。 还 要 多 从 客户 的 角度 去 想 , 其 终极 目标 就 是 为 发 布 到 客户 手中 的 软件 把 好 质量 关 。 
其 中 , 找 bug 是 软件 测试 开发 工程 师 应 该 具备 的 基本 功 。 

不 久 她 就 找到 机 会 “测试 "了 一 把 自己 的 SDET 指数 。 正 好 高 性 能 计算 组 举办 找 bug 
比赛 ,优胜 者 可 以 获得 一 些小 礼品 ,她 拿 到 了 一 个 印 有 Microsoft 标志 的 水 杯 。 

这 时 候 , 她 的 一 个 高 中 同学 在 MSN 上 面 发 了 条 消息 :“ 你 当 了 测试 工程 师 , 就 不 用 编 
程 了 吧 ?” 看 来 需要 澄清 一 下 了 。 
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测试 初 体验 三 ” 谁 说 软件 测试 开发 工程 师 不 用 写 代 码 了 ? 


微软 早年 也 设 有 只 做 手工 测试 而 不 写 代码 的 职位 , 称 为 STE (Software Testing 
Engineer)。 现 在 所 有 的 测试 工程 师 的 职位 都 叫做 SDET (Software Development 
Engineer in Test) ,从 名 字 可 以 看 出 来 ,需要 具备 编程 能 力 , 这 些 编程 工作 是 为 了 更 好 地 
做 测试 。 

举 个 例子 , 李 敏 负责 的 某 个 UI 模块 有 1000 多 个 测试 用 例 , 手 工 执行 一 遍 想 想 都 很 
累 。 为 了 偷懒 ,她 写 了 些 代码 将 其 中 80% 的 测试 用 例 实现 测试 自动 化 ,这 样 下 班 前 只 
让 机 器 开始 跑 自动 化 ,第 二 天 就 可 以 拿 到 结果 ,从 而 大 大 减少 了 验证 这 些 测试 用 例 所 需要 
花 的 人 工时 间 , 又 可 以 及 时 地 捕捉 到 bug。 此 外 ,软件 测试 开发 工程 师 经 常会 做 一 些 实用 
的 测试 工具 和 研究 测试 技术 ,比如 开发 UI 测试 方面 的 工具 ,开发 测试 流程 管理 工具 ,和 
更 好 地 运用 基于 模型 的 测试 方法 等 。 在 坚持 创新 的 公司 文化 引导 下 ,大 家 都 非常 注重 运 
用 新 技术 新 方法 ,不 断 地 把 测试 工作 推进 到 新 的 高 度 。 

转眼 间 ,一 年 过 去 了 , 李 敏 从 上 海 的 服务 器 与 开发 工具 事业 部 的 老大 手中 接 过 了 一 周 
年 的 水 晶 纪 念 碑 ,按照 惯例 还 请 大 家 吃 了 一 磅 的 M&M 巧克力 。2007 年 秋天 ,她 所 在 的 
团队 发 布 了 System Center Configuration Manager 2007。 在 这 段 时 间 里 ,她 亲身 体验 了 
微软 给 员工 提供 的 多 种 多 样 的 成 长 帮助 。 

资料 来 源 : 网 络 资料 。 
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所 有 功能 基本 独立 的 模块 经 过 严格 的 单元 测试 后 , 接 下 来 就 进入 集成 测试 阶段 。 集 
成 测试 (也 称 组 装 测试 ,联合 测试 或 联 调 ) 的 目的 是 检验 软件 单元 之 间 、 软 件 单元 和 已 集成 
的 软件 系统 之 间 的 接口 关系 ,并 验证 已 集成 软件 系统 是 否 符合 设计 要 求 。 集 成 测试 提供 
了 组 合 软 件 的 手段 , 它 根据 概要 设计 中 各 功能 模块 的 说 明 以 及 事先 制定 的 集成 测试 计划 ， 
将 经 过 单元 测试 的 模块 逐步 进行 组 装 和 测试 , 即 把 每 个 通过 测试 的 模块 加 入 软件 总 体 结 
构 中 。 每 加 入 一 个 模块 ,都 要 找 出 由 此 产生 的 错误 ,以 检查 这 些 单元 之 间 的 接口 是 否 存在 
问题 。 集 成 测试 通常 采用 黑 盒 测试 (功能 测试 ) 方 法 来 设计 测试 用 例 。 

所 谓 软件 配置 项 ,是 指 为 独立 的 配置 管理 而 设计 的 ,并 且 能 满足 最 终 用 户 功 能 的 一 组 
软件 。 配 置 项 测试 有 时 也 称 为 确认 测试 , 即 检验 软件 配置 项 与 软件 需求 规格 说 明 的 一 
致 性 。 


8.1 集成 测试 的 技术 要 求 


集成 测试 的 对 象 包括 : 

(1) 任意 一 个 软件 单元 集成 到 计算 机 软件 系统 的 组 装 过 程 ; 

(2) 任意 一 个 组 装 得 到 的 软件 系统 。 

集成 测试 一 般 由 软件 供 方 组 织 并 实施 ,测试 人 员 与 开发 人 员 应 相对 独立 ,也 可 委托 第 
三 方 进行 集成 测试 。 集 成 测试 的 工作 产品 一 般 应 纳入 软件 的 配置 管理 中 。 

集成 测试 的 技术 依据 是 软件 设计 文档 (或 称 软件 结构 设计 文档 .软件 概要 设计 文档 ) 。 

集成 测试 一 般 应 符合 以 下 技术 要 求 : 

(1) 应 对 已 集成 软件 进行 必要 的 静态 测试 ,并 先 于 动态 测试 进行 ; 

(2) 软件 要 求 的 每 个 特性 应 被 至 少 一 个 正常 的 测试 用 例 和 一 个 被 认可 的 异常 测试 用 
例 覆 盖 ， 

(3) 测试 用 例 的 输入 应 至 少 包括 有 效 等 价 类 值 .无 效 等 价 类 值 和 边界 数据 值 ; 

(4) 采用 增 量 法 测试 新 组 装 的 软件 ; 

(5) 应 逐 项 测试 软件 设计 文档 规定 的 软件 的 功能 、 性 能 等 特性 ; 

(6) 应 测试 软件 之 间 、 软 件 和 硬件 之 间 的 所 有 接口 ; 

(7) 应 测试 软件 单元 之 间 的 所 有 调用 ,达到 100% 的 测试 覆盖 率 ; 

(8) 应 测试 软件 的 输出 数据 及 其 格式 ; 

(9) 应 测试 运行 条 件 (如 数据 结构 输入 /输出 通道 容量 、 内 存 空间 、 调 用 频率 等 ) 在 边 
界 状态 下 ,进而 在 人 为 设 定 的 状态 下 的 软件 功能 和 性 能 ; 

(10) 应 按 设计 文档 要 求 , 对 软件 的 功能 、 性 能 进行 强度 测试 ; 
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(11) 对 完整 性 级 别 高 的 软件 ,应 对 其 进行 安全 性 分 析 , 明 确 每 一 个 危险 状态 和 导致 
危险 的 可 能 原因 ,并 对 此 进行 针对 性 的 测试 。 

对 具体 的 软件 ,可 根据 软件 测试 合同 (或 项 目 计划 ) 及 软件 的 重要 性 、 完 整 性 级 别 对 上 
述 内 容 进行 裁剪。 


8.2 集成 的 模式 与 方法 


在 软件 开发 中 经 常会 遇 到 这 样 的 情况 ,单元 测试 时 确认 每 个 模块 都 能 单独 工作 ,但 这 
些 模 块 集成 在 一 起 之 后 会 出 现 有 些 模块 不 能 正常 工作 的 状况 。 这 主要 因为 模块 相互 调用 
时 接口 会 引入 许多 新 间 题 。 例 如 ,数据 经 过 接口 可 能 丢失 ,一 个 模块 对 另 一 模块 可 能 造成 
不 应 有 的 影响 , 几 个 子 功能 组 合 起 来 不 能 实现 主 功能 ,误差 不 断 积累 达 到 不 可 接受 的 程 
度 , 全 局 数据 结构 出 现 错误 等 。 


8.2.1 测试 前 的 准备 


在 开始 集成 测试 之 前 ,一 般 需 要 考虑 以 下 因素 。 

(1) 人 员 安排 。 集 成 测试 既 要 求 参 与 的 人 熟悉 单元 的 内 部 细节 ,又 要 求 能 够 从 一 定 
的 高 度 来 观察 整个 系统 。 一 般 由 有 经 验 的 测试 人 员 和 软件 开发 者 共同 完成 集成 测试 的 计 
划 和 执行 。 

(2) 测试 计划 。 集 成 测试 计划 在 系统 设计 阶段 就 开始 制定 , 随 着 系统 设计 、 开 发 过 程 
不 断 细 化 ,最 终 在 系统 实施 集成 之 前 完成 。 集 成 测试 计划 中 主要 包含 测试 的 描述 和 范围 、 
测试 的 预期 目标 \ 测 试 环境 、 集 成 次 序 、 测 试用 例 设计 思想 和 时 间 表 等 。 

(3) 测试 内 容 。 将 所 有 单元 集成 到 一 起 ,组 成 一 个 完整 的 软件 系统 ,其 测试 重点 是 各 
单元 的 接口 是 否 吻合 、 代 码 是否 符 合 规定 的 标准 、 界 面 标准 是 否 统一 等 。 

(4) 集成 模式 。 即 选择 把 所 有 模块 按 设计 要 求全 部 组 装 起 来 后 进行 测试 ,还 是 在 模 
块 一 个 一 个 地 扩展 下 进行 ,其 测试 的 范围 逐步 增 大 。 

当 对 两 个 以 上 的 模块 进行 集成 时 ,不 能 忽视 它们 和 周围 模块 的 相互 联系 。 男 一 方面 ， 
为 模拟 这 些 联系 ,也 需要 借助 驱动 程序 和 桩 程序 。 选 择 集成 测试 的 策略 ,将 直接 关系 到 测 
试 的 效率 ,结果 等 。 集 成 测试 一 般 有 两 种 组 合 软件 方式 , 即 非 渐 增 式 测试 和 渐 增 式 测试 ， 
在 实际 测试 中 ,通常 将 这 两 种 模式 有 机 地 结合 在 一 起 。 

(5) 测试 方法 。 集 成 测试 阶段 以 黑 盒 测 试 为 主 。 在 自 底 向 上 集成 的 初期 , 白 盒 测试 
占 较 大 的 比例 , 随 着 测试 的 不 断 深入 ,渐渐 由 黑 盒 测 试 占据 主导 地 位 。 


8.2.2 集成 测试 的 任务 
集成 测试 应 该 完成 的 任务 是 : 系统 的 所 有 功能 特性 的 测试 ;数据 库 的 装载 ,重组 、 恢 


复 等 方面 的 测试 ;系统 接口 (包括 内 、 外 部 接口 ) 的 测试 ;整体 性 的 出 错 处 理 测试 ;检查 系统 
的 安全 性 。 


166| 


集成 测试 与 配置 项 《确认 ) 测试 技术 


集成 测试 应 注意 保证 各 模块 间 无 错误 的 连接 ,应 对 软件 系统 或 子 系统 的 输入 /输出 处 
理 进行 测试 ,使 其 达到 设计 要 求 , 应 测试 软件 系统 或 子 系统 正确 处 理 的 能 力 和 经 受 错误 的 
能 力 。 


8.3 集成 测试 的 内 容 


软件 集成 测试 一 般 采 用 静态 测试 和 动态 测试 方法 。 静 态 测试 方法 常 采用 静态 分 析 、 
代码 走 查 等 。 进 行 静态 测试 时 ,所 选择 的 静态 测试 方法 与 测试 的 内 容 有 关 。 动 态 测试 方 
法 常 采 用 白 盒 测试 方法 和 黑 盒 测试 方法 。 通 常 ,静态 测试 先 于 动态 测试 进行 。 

当 动 态 测试 时 ,可 从 全 局 数据 结构 及 软件 的 适合 性 、 准 确 性 、 互 操作 性、 容错 性 时间 
特性 ,资源 利用 性 这 几 个 软件 质量 子 特性 方面 考虑 ,确定 测试 内 容 。 应 根据 软件 测试 合同 
(或 项 目 计 划 )、 软 件 设计 文档 的 要 求 及 选择 的 测试 方法 来 确定 测试 的 具体 内 容 。 

(1) 全 局 数据 结构 。 测 试 全 局 数据 结构 的 完整 性 ,包括 数据 的 内 容 、 格 式 , 并 对 内 部 
数据 结构 对 全 局 数据 结构 的 影响 进行 测试 。 

(2) 适合 性 方面 。 应 对 软件 设计 文档 分 配给 已 集成 软件 的 每 一 项 功能 逐 项 进行 
测试 。 

(3) 准确 性 方面 。 可 对 软件 中 具有 准确 性 要 求 的 功能 和 精度 要 求 的 项 (如 数据 处 理 
精度 .时 间 控 制 精度 .时 间 测 量 精 度 ) 进 行 测试 。 

(4) 互 操作 行 方面 。 可 考虑 测试 以 下 两 种 接口 : 所 加 入 的 软件 单元 与 已 集成 软件 之 
间 的 接口 ;已 集成 软件 与 支持 其 运行 的 其 他 软件 、 例 行程 序 或 硬件 设备 的 接口 。 对 接口 的 
输入 和 输出 数据 的 格式 .内容 、 传 递 方式 ,接口 协议 等 进行 测试 。 

测试 软件 的 控制 信息 ,如 信号 或 中 断 的 来 源 、 信 号 或 中 断 的 目的 、 信 号 或 中 断 的 优先 
级 、 信 号 或 中 断 的 表示 格式 或 表示 值 、 信 号 或 中 断 的 最 小 .最 大 和 平均 频率 、. 相 应 方式 和 相 
应 时 间 等 。 

(5) 容错 性 方面 。 可 考虑 测试 已 集成 软件 对 差错 输入 、 差 错 中 断 、 漏 中 断 等 情况 的 容 
错 能 力 ,并 考虑 通过 仿真 平台 或 硬件 测试 设备 形成 一 些 人 为 条 件 ,测试 软件 功能 .性 能 的 
降级 运行 情况 。 

(6) 时 间 特 性 方面 。 可 考虑 测试 已 集成 软件 的 运行 时 间 ,算法 的 最 长 路 径 下 的 计算 
时 间 。 

(7) 资源 利用 性 方面 。 可 考虑 测试 软件 运行 占用 的 内 存 空间 和 外 存 空间 。 

软件 集成 的 总 体 计划 和 特定 的 测试 描述 应 该 在 测试 规格 说 明 中 文档 化 。 这 项 工作 产 
品 包含 测试 计划 和 测试 规程 ,并 成 为 软件 配置 的 一 部 分 。 测 试 可 以 分 为 若干 个 阶段 和 处 
理 软件 特定 功能 和 行为 特征 的 若干 个 构造 来 实施 。 例 如 ,SafeHome 安全 系统 的 集成 测 
试 可 以 划分 为 以 下 测试 阶段 : 

。 用 户 交互 (命令 输入 与 输出 、 显 示 表 示 、 出 错 处 理 与 表示 ); 

。 传感器 处 理 ( 获 取 传 感 器 输出 、 确 定 传感器 的 状态 、 作 为 状态 的 结果 所 需要 的 

动作 ); 

。 通信 功能 (与 中 央 监 测 站 通信 的 能 力 ); 
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。 警报 处 理 ( 测 试 遇 到 警报 发 生 时 的 软件 动作 ) 。 

每 个 集成 测试 阶段 都 刻画 了 软件 内 部 广泛 的 功能 类 别 ,而且 通 常 与 软件 体系 结构 中 
特定 的 领域 相关 ,因此 ,对 应 于 每 个 阶段 建立 了 相应 的 程序 构造 (模块 集 ) 。 

下 列 准则 和 相应 的 测试 应 用 于 所 有 的 测试 阶段 。 

。 接口 完整 性 。 当 每 个 模块 (或 秘 ) 引 入 到 程序 结构 中 时 ,对 其 内 部 和 外 部 接口 进行 

测试 。 

。 功能 有 效 性 。 执 行 旨 在 发 现 功能 错误 的 测试 。 

。 信息 内 容 。 执 行 旨 在 发 现 与 局 部 或 全 局 数据 结构 相关 错误 的 测试 。 

。 性能。 执行 旨 在 验证 软件 设计 期 间 建立 的 性 能 边界 的 测试 。 

集成 的 进度 、 附 加 的 开发 以 及 相关 问题 也 在 测试 计划 中 讨论 。 确 定 每 个 阶段 的 开始 
和 结束 时 间 ,定义 单元 测试 模块 的 “可 用 性 窗口 "。 附 加 软件 ( 桩 模块 及 驱动 模块 ) 的 简要 
描述 侧重 于 可 能 需要 特殊 工作 的 特征 。 最 后 ,描述 测试 环境 和 资源 。 特 殊 的 硬件 配置 , 特 
殊 的 仿真 器 和 专门 的 测试 工具 或 技术 也 是 需要 讨论 的 问题 。 

接着 需要 描述 的 是 实现 测试 计划 所 必需 的 详细 测试 规程 。 描 述 集成 的 顺序 以 及 每 个 
集成 步骤 中 对 应 的 测试 ,其 中 也 包括 所 有 的 测试 用 例 和 期 望 的 结果 列表 。 

实际 测试 结果 ` 问 题 或 特例 的 历史 要 记录 在 测试 报告 中 ,也 要 给 出 适当 的 参考 文献 和 
附录 。 与 软件 配置 的 其 他 成 分 一 样 ,测试 规格 说 明 的 格式 可 以 根据 组 织 的 具体 要 求 进行 
剪裁 。 


8.4 集成 测试 过 程 


测试 环境 应 包括 测试 的 运行 环境 和 经 过 认可 的 测试 工具 环境 。 测 试 的 运行 环境 一 般 
应 符合 软件 测试 合同 (或 项 目 计 划 ) 的 要 求 ,通常 是 开发 环境 或 仿真 环境 。 在 由 软件 单元 
和 已 集成 软件 组 装 成 新 的 软件 时 ,应 根据 软件 单元 和 已 集成 软件 特点 选择 便于 测试 的 组 
装 策略 。 

集成 测试 的 实施 步骤 包括 : 

(1) 执行 测试 计划 中 所 有 要 求 做 的 集成 测试 。 

(2) 分 析 测 试 结果 , 找 出 产生 错误 的 原因 。 

(3) 提交 集成 测试 分 析 报 告 ,以 便 尽快 修改 错误 。 

(4) 评审 。 


8.4.1 测试 策划 


测试 分 析 人 员 应 根据 测试 合同 (或 项 目 计划 ) 和 被 测试 软件 的 设计 文档 ( 含 接口 设计 
文档 ) 对 被 测试 软件 进行 分 析 ,并 确定 以 下 内 容 。 

(1) 确定 测试 充分 性 要 求 。 根 据 软件 的 重要 性 和 完整 性 级 别 , 确 定 测试 应 覆盖 的 范 
围 及 每 一 范围 所 要 求 的 覆盖 程度 。 

(2) 确定 测试 终止 的 要 求 。 指 定 测试 过 程 正常 终止 的 条 件 ( 如 是 否 达到 测试 的 充分 
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性 要 求 ) ,并 确定 导致 测试 过 程 异常 终止 的 可 能 情况 (如 软件 接口 错误 ) 。 

(3) 确定 用 于 测试 的 资源 要 求 。 包 括 软 件 ( 如 操作 系统 、 编 译 软件 .静态 分 析 软 件 、 测 
试 驱动 软件 等 )\ 硬 件 ( 如 计算 机 、 设 备 接口 等 )、 人 员 数 量 `. 人 员 技 能 等 。 

(4) 确定 需要 测试 的 软件 特性 。 根 据 软件 设计 文档 ( 含 接口 设计 文档 ) 的 描述 确定 软 
件 的 功能 性能、 状态 .接口 .数据 结构 .设计 约 东 等 内 容 和 要 求 ,对 其 标识 。 若 需要 ,将 其 
分 类 。 并 从 中 确定 需 测试 的 软件 特性 。 

(5) 确定 测试 需要 的 技术 和 方法 。 如 测试 数据 生成 和 验证 技术 、 增 量 测试 的 组 装 策 
略 等 。 

(6) 根据 测试 合同 (或 项 目 计 划 ) 的 要 求 和 被 测 软件 的 特点 ,确定 测试 准 出 条 件 。 

(7) 确定 由 资源 和 被 测 软件 决定 的 软件 集成 测试 活动 的 进度 。 

(8) 对 测试 工作 进行 风险 分 析 与 评估 ,并 制定 应 对 措施 。 

根据 上 述 分 析 研 究 结果 ,编写 软件 集成 测试 计划 。 

应 对 软件 集成 测试 计划 进行 评审 。 评 审 测试 的 范围 和 内 容 、 资 源 、 进 度 、 各 方 责任 等 
是 否 明 确 , 测 试 方法 是 否 合理 有 效 和 可 行 ,风险 的 分 析 、 评 估 与 对 策 是 否 准 确 可 行 , 测 试 
文档 是 否 符合 规范 ,测试 活动 是 否 独 立 。 当 测试 活动 由 被 测试 软件 的 供 方 实施 时 ,软件 集 
成 测试 计划 的 评审 应 纳入 被 测试 软件 的 概要 设计 阶段 评审 ,通过 评审 后 ,进入 下 一 步 
工作 。 


8.4.2 测试 设计 


测试 设计 工作 由 测试 设计 人 员 和 测试 程序 员 完成 ,一 般 根据 集成 测试 计划 完成 以 下 
工作 。 

(1) 设计 测试 用 例 。 将 需 测试 的 软件 特性 分 解 ,针对 分 解 后 的 每 种 情况 设计 测试 
用 例 。 

(2) 获取 测试 数据 。 包 括 获取 现 有 的 测试 数据 和 生成 新 的 数据 ,并 按照 要 求 验证 所 
有 数据 。 

(3) 确定 测试 顺序 。 可 从 资源 约束 、 风 险 以 及 测试 用 例 失效 造成 的 影响 或 后 果 几 个 
方面 考虑 。 

(4) 获取 测试 资源 。 对 于 支持 测试 的 软件 ,有 的 需要 从 现 有 的 工具 中 选 定 ,有 的 需要 
开发 。 

(5) 编写 测试 程序 。 包 括 开发 测试 支持 工具 ,集成 测试 的 驱动 模块 和 桩 模块 。 

(6) 建立 和 校准 测试 环境 。 

(7) 按照 测试 规范 的 要 求 编写 软件 集成 测试 说 明 。 

应 对 软件 集成 测试 说 明 进 行 评审 。 评 审 测试 用 例 是 否 正确 、 可 行 和 充分 ,测试 环境 是 
否 正 确 ,合理 ,测试 文档 是 否 符合 规范 。 当 测试 活动 由 被 测试 软件 的 供 方 实施 时 ,软件 集 
成 测试 计划 的 评审 应 纳入 软件 开发 的 阶段 评审 ,通过 评审 后 进入 下 一 步 工作 。 
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8.4.3 测试 执行 


执行 测试 的 工作 由 测试 员 和 测试 分 析 员 完 成 。 

测试 员 的 主要 工作 是 执行 集成 测试 计划 和 集成 测试 说 明 中 规定 的 测试 项 目 和 内 容 。 
在 执行 过 程 中 ,应 认真 观察 并 如 实地 记录 测试 过 程 , 测 试 结 果 和 发 现 的 差错 ,填写 测试 
记录 。 

测试 分 析 员 的 工作 有 如 下 两 方面 。 

(1) 根据 每 个 测试 用 例 的 期 望 测试 结果 、 实 际 测试 结果 和 评价 准则 判定 该 测试 用 例 
是 否 通 过 。 如 果 不 通过 ,测试 分 析 员 应 认真 分 析 情 况 , 并 根据 情况 采取 相应 措施 。 

(2) 当 所 有 的 测试 用 例 都 执行 完毕 ,测试 分 析 员 要 根据 测试 的 充分 性 要 求 和 失效 记 
录 ,确定 测试 工作 是 否 充 分 ,是 否 需要 增加 新 的 测试 。 当 测试 过 程 正常 终止 时 ,如 果 发 现 
测试 工作 不 足 , 应 对 软件 进行 补充 测试 ,直到 测试 达到 预期 要 求 , 并 将 附加 的 内 容 记 录 在 
集成 测试 报告 中 。 当 测试 过 程 异常 终止 时 ,应 记录 导致 终止 的 条 件 、 未 完成 的 测试 和 未 被 
修正 的 差错 。 


8.4.4 测试 总 结 


测试 分 析 员 应 根据 被 测 软件 的 设计 文档 ( 含 接口 设计 文档 ) 、 集 成 测试 计划 、 集 成 测试 
说 明 ,测试 记录 和 软件 问题 报告 单 等 ,分 析 和 评价 测试 工作 ,一 般 应 在 集成 测试 报告 中 
记录 : 

(1) 总 结集 成 测试 计划 和 集成 测试 说 明 的 变化 情况 及 其 原因 ; 

(2) 对 测试 异常 终止 情况 ,确定 未 能 被 测试 活动 充分 缆 盖 的 范围 ; 

(3) 确定 未 能 解决 的 软件 测试 事件 以 及 不 能 解决 的 理由 ; 

(4) 总 结 测试 所 反映 的 软件 代码 与 软件 设计 文档 ( 含 接口 设计 文档 ) 之 间 的 差异 ; 

(5) 将 测试 结果 连同 所 发 现 的 出 错 情 况 同 软 件 设计 文档 ( 含 接口 设计 文档 ) 对 照 , 评 
价 软件 的 设计 与 实现 ,提出 软件 改进 建议 ; 

(6) 按照 测试 规范 的 要 求 编写 软件 集成 测试 报告 ,包括 测试 结果 分 析 、 对 软件 的 评价 
和 建议 ; 

(7) 根据 测试 记录 和 软件 问题 报告 单 编写 测试 问题 报告 。 

应 对 软件 集成 测试 执行 活动 ,测试 报告 .测试 记录 和 测试 问题 报告 进行 评审 。 评 审 测 
试 执行 活动 的 有 效 性 测试 结果 的 正确 性 和 合理 性 ,测试 目的 是 否 达 到 、 测 试 文档 是 否 符 
合 要 求 。 当 测试 活动 由 被 测试 软件 的 供 方 实施 时 ,评审 由 软件 供 方 组 织 ,软件 需 方 和 有 关 
专家 参加 ; 当 测试 活动 由 独立 测试 机 构 实 施 时 ,评审 由 软件 测试 机 构 组 织 ,软件 需 方 、 供 方 
和 有 关 专 家 参加 。 
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8.5 配置 项 测试 的 技术 要 求 


在 很 多 情况 下 ,软件 必须 在 多 种 平台 及 操作 系统 环境 中 运行 ,因此 ,需要 在 软件 将 要 
运行 的 每 一 种 环境 中 对 软件 进行 测试 。 另 外 ,要 检查 客户 将 要 使 用 的 所 有 安装 程序 及 专 
业 安 装 软件 (例如 “安装 程序 ”) ,并 检查 用 于 向 最 终 用 户 介绍 软件 的 所 有 文档 。 

软件 配置 项 测试 又 称 为 确认 测试 或 部 署 测 试 ,其 对 象 是 软件 配置 项 。 所 谓 软 件 配 置 
项 ,是 指 为 独立 的 配置 管理 而 设计 的 ,并 且 能 满足 最 终 用 户 功 能 的 一 组 软件 。 配 置 项 测试 
的 目的 是 检验 软件 配置 项 与 软件 需求 规格 说 明 的 一 致 性 。 

应 保证 软件 配置 项 测试 工作 的 独立 性 。 软 件 配置 项 测试 一 般 由 软件 的 供 方 组 织 , 由 
独立 于 软件 开发 的 人 员 实 施 , 软 件 开 发 人 员 配 合 。 如 果 配 置 项 测试 委托 第 三 方 实施 ,一 般 
应 委托 国家 认可 的 第 三 方 测试 机 构 进行 。 

软件 配置 项 测试 的 技术 依据 是 软件 需求 规格 说 明 ( 含 接口 需求 规格 说 明 ) ,一 般 应 符 
合 以 下 技术 要 求 : 

(1) 必要 时 ,在 高 层 控制 流 图 中 作 结构 覆盖 测试 

(2) 软件 配置 项 的 每 个 部 件 应 至 少 被 一 个 正常 测试 用 例 或 一 个 被 认可 的 异常 测试 用 
例 所 覆盖 ; 

(3) 测试 用 例 的 输入 应 至 少 包括 有 效 等 价 类 值 .无 效 等 价 类 值 和 边界 数据 值 ; 

(4) 应 逐 项 测试 软件 需求 规格 说 明 规定 的 软件 配置 项 的 功能 \ 性 能 等 特性 ; 

(5) 应 测试 软件 配置 项 的 所 有 外 部 输入 ,输出 接口 (包括 和 硬件 之 间 的 接口 ); 

(6) 应 测试 软件 配置 项 的 输出 及 其 格式 ; 

(7) 应 按 软件 需求 规格 说 明 的 要 求 ,测试 软件 配置 项 和 数据 的 安全 保密 性 ; 

(8) 应 测试 人 机 交互 界面 提供 的 操作 和 显示 界面 ,包括 用 非常 规 操作 、 误 操作 、 快 速 
操作 测试 界面 的 可 靠 性 ; 

(9) 应 测试 运行 条 件 在 边界 状态 和 异常 状态 下 ,或 在 人 为 设 定 的 状态 下 ,软件 配置 项 
的 功能 和 性 能 ; 

(10) 应 测试 软件 配置 项 的 全 部 存储 量 、 输 入 /输出 通道 和 处 理 时 间 的 余 量 ; 

(11) 应 按 需求 规格 说 明 的 要 求 , 对 软件 配置 项 的 功能 、 性 能 进行 强度 测试 

(12) 应 测试 设计 中 用 于 提高 软件 配置 项 安全 性 、 可 靠 性 的 结构 算法、 容错 元 余 、 中 
断 处 理 等 方案 ; 

(13) 对 完整 性 级 别 高 的 软件 配置 项 ,应 对 其 进行 安全 性 分 析 , 明 确 每 一 个 危险 状态 
和 导致 危险 的 可 能 原因 ,并 对 其 进行 针对 性 的 测试 ; 

(14) 对 有 恢复 或 重 置 功能 需求 的 软件 配置 项 ,应 测试 其 恢复 或 重 置 功能 和 平均 恢复 
时 间 , 并 且 对 每 一 类 导致 恢复 或 重 置 的 情况 进行 测试 ; 

(15) 对 不 同 的 实际 问题 应 外 加 相应 的 专门 测试 。 

对 具体 的 软件 配置 项 ,可 根据 软件 测试 合同 (或 项 目 计划 ) 及 软件 配置 项 的 重要 性 、 完 
整 性 级 别 等 要 求 对 上 述 内 容 进行 裁剪 。 

作为 一 个 例子 ,考虑 SafeHome 软件 的 因特网 版 ,此 版 本 允许 顾客 远程 监测 安全 系 
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统 。 这 就 需要 使 用 可 能 碰 到 的 所 有 Web 浏览 器 对 SafeHome Web 应 用 系统 进行 测试 。 
更 彻底 的 配置 项 测试 应 该 包括 Web 浏览 器 与 不 同 操作 系统 (例如 Linux、Mac OS、 
Windows 等 ) 的 组 合 。 由 于 安全 是 主要 问题 ,一 组 完整 的 安全 测试 应 该 与 配置 项 测试 结 
合 起 来 进行 。 


8.6 配置 项 测试 的 内 容 


配置 项 测试 依据 软件 的 质量 特性 来 进行 ,其 测试 内 容 主要 包括 : 适合 性 、 准 确 性 、 互 
操作 性 、 安 全 保密 性 成熟 性 容错 性 、 易 恢复 性 、 易 理解 性 ,易学 性 、 易 操作 性 、 吸 引 性 、 时 
间 特 性 ,资源 利用 性 、 易 分 析 性 、 易 改变 性 、 稳 定性 、 易 测试 性 、 适 应 性 、 易 安装 性 、 共 存 性 、 
易 替换 性 和 依从 性 等 方面 (有 选择 的 )。 

对 具体 的 软件 配置 项 ,可 根据 软件 合同 (或 项 目 计 划 ) 及 软件 需求 规格 说 明 的 要 求 进 
行 裁剪 。 


8.6.1 功能 性 


软件 的 功能 性 包括 适合 性 \ 准 确 性 \ 互 操作 性 和 安全 保密 性 等 方面 。 

(1) 适合 性 。 应 测试 软件 需求 规格 说 明 规定 的 软件 配置 项 的 每 一 项 功能 。 

(2) 准确 性 。 可 对 软件 配置 项 中 具有 准确 性 要 求 的 功能 和 精度 要 求 的 项 (如 数据 处 
理 精度 .时 间 控 制 精度 ,时间 测量 精度 ) 进 行 测试 。 

(3) 互 操作 性 。 可 测试 软件 需求 规格 说 明 ( 含 接口 需求 规格 说 明 ) 和 接口 设计 文档 规 
定 的 软件 配置 项 与 外 部 设备 的 接口 .与 其 他 系统 的 接口 ,测试 接口 的 格式 和 内 容 。 包 括 数 
据 交换 的 数据 格式 和 内 容 ; 测 试 接口 之 间 的 协调 性 ;测试 软件 配置 项 对 系统 每 一 个 真实 接 
口 的 正确 性 ;测试 软件 配置 项 从 接口 接收 和 发 送 数据 的 能 力 ; 测 试 数据 的 约定 ,协议 的 一 
致 性 ;测试 软件 配置 项 对 外 围 设备 接口 特性 的 适应 性 。 

(4) 安全 保密 性 。 可 测试 软件 配置 项 及 其 数据 访问 的 可 控制 性 。 

测试 软件 配置 项 可 防止 非法 操作 的 模式 ,包括 防止 非 授权 的 创建 、 删 除 或 修改 程序 或 
信息 ,必要 时 做 强化 异常 操作 的 测试 ;防止 数据 被 话 误 和 被 破坏 的 能 力 ; 加 密 和 解密 功能 。 


8.6.2 可 靠 性 


软件 的 可 靠 性 包括 成 熟 性 、 容 错 性 和 易 恢 复 性 等 方面 。 

1) 成 熟 性 

在 成 熟 性 方面 可 基于 软件 配置 项 操作 剖面 设计 测试 用 例 。 根 据 实际 使 用 的 概率 分 布 
随机 选择 输入 运行 软件 配置 项 ,测试 软件 配置 项 满足 需求 的 程度 ,并 获取 失效 数据 ,其 中 
包括 对 重要 输入 变量 值 的 覆盖 、 对 相关 输入 变量 可 能 组 合 的 覆盖 、 对 设计 输入 空间 与 实际 
输入 空间 之 间 区 域 的 覆盖 、 对 各 种 使 用 功能 的 覆盖 和 对 使 用 环境 的 覆盖 。 应 在 有 代表 性 
的 使 用 环境 中 以 及 可 能 影响 软件 配置 项 运行 方式 的 环境 中 运行 软件 配置 项 ,验证 可 靠 性 
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需求 是 否 正 确实 现 。 对 一 些 特殊 的 软件 配置 项 ,如 容错 、 实 时 嵌入 式 等 ,由 于 在 一 般 的 使 
用 环境 下 常常 很 难 在 软件 配置 项 中 植 和 人 差错 ,应 考虑 多 种 测试 环境 。 

测试 软件 配置 项 平均 无 故障 时 间 ,通过 检测 到 的 失效 数 和 故障 数 对 软件 配置 项 的 可 
靠 性 进行 预测 。 

2) 容错 性 

从 容错 性 方面 考虑 可 测试 软件 配置 项 : 

(1) 对 中 断 发 生 的 反应 ; 

(2) 在 边界 条 件 下 的 反应 ; 

(3) 功能 ,性 能 的 降级 情况 ; 

(4) 各 种 误 操 作 模 式 ; 

(5) 各 种 故障 模式 (如 数据 超 范围 . 死 锁 ); 

(6) 在 多 机 系统 出 现 故 障 需要 切换 时 ,软件 配置 项 的 功能 和 性 能 的 连续 平稳 性 。 

3) 易 恢复 性 

从 易 恢复 性 方面 考虑 ,可 测试 软件 配置 项 : 

(1) 具有 自动 修复 功能 的 软件 配置 项 的 自动 修复 时 间 ; 

(2) 在 特定 的 时 间 范 围 内 的 平均 宕 机 时 间 ; 

(3) 在 特定 的 时 间 范 围 内 的 平均 恢复 时 间 ; 

(4) 可 重启 动 并 继续 提供 服务 的 能 力 ; 

(5) 还 原 功能 的 还 原 能 力 。 


8.6.3 易 用 性 


软件 的 易 用 性 包括 易 理 解 性 、 易 学 性 、 易 操作 性 和 吸引 性 等 方面 。 

1) 易 理 解 性 

从 易 理解 性 方面 考虑 ,可 测试 : 

(1) 软件 配置 项 的 各 项 功能 ,确认 它们 是 否 容易 被 识别 和 被 理解 ; 

(2) 要 求 具有 演示 能 力 的 功能 ,确认 演示 是 否 容易 被 访问 、 演 示 是 否 充 分 和 有 效 ; 

(3) 界面 的 输入 和 输出 ,确认 输入 和 输出 的 格式 和 含义 是 否 容易 被 理解 。 

2) 易学 性 

从 易学 性 方面 考虑 ,可 测试 软件 配置 项 的 在 线 帮 助 , 确 认 在 线 帮 助 是 否 容 易 定位 ,是 
否 有 效 ; 还 可 对 照 用 户 手册 或 操作 手册 执行 软件 配置 项 ,测试 用 户 文档 的 有 效 性 。 

3) 易 操作 性 

从 易 操作 性 方面 考虑 ,可 测试 : 

(1) 输入 数据 ,确认 软件 配置 项 是 否 对 输入 数据 进行 有 效 性 检查 ; 

(2) 具有 中 断 执行 的 功能 ,确认 它们 能 否 在 动作 完成 之 前 被 取消 ; 

(3) 具有 还 原 能 力 (数据 库 事务 回 滚 ) 的 功能 ,确认 它们 能 和 否 在 动作 完成 之 后 被 撤销 ; 

(4) 包含 参数 设置 的 功能 ,确认 参数 是 否 易于 选择 .是 否 有 缺 省 值 ; 

(5) 具有 解释 的 消息 ,确认 它们 是 否 明确 ; 
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(6) 具有 界面 提示 能 力 的 界面 元 素 ,确认 它们 是 否 有 效 ; 

(7) 具有 容错 能 力 的 功能 和 操作 ,确认 软件 配置 项 能 否 提示 差错 的 风险 、 能 否 容易 纠 
正 错误 的 输入 、 能 否 从 错误 中 恢复 ; 

(8) 具有 定制 能 力 的 功能 和 操作 ,确认 定制 能 力 的 有 效 性 ; 

(9) 具有 运行 状态 监控 能 力 的 功能 ,确认 它们 的 有 效 性 。 

以 正确 操作 模式 \ 误 操作 模式 、 非 常规 操作 模式 和 快速 操作 模式 为 框架 设计 测试 用 
例 。 误 操作 模式 有 错误 的 数据 类 型 作 参 数 错误 的 输入 数据 序列 ,错误 的 操作 序列 等 。 如 
有 用 户 手 册 或 操作 手册 ,可 对 照 手 册 逐 条 进行 测试 。 

4) 吸引 性 

从 吸引 性 方面 考虑 ,可 测试 软件 配置 项 的 人 机 交互 界面 能 否定 制 。 


8.6.4 效率 


软件 的 效率 特性 包括 时 间 特 性 和 资源 利用 性 等 方面 。 

1) 时 间 特 性 

从 时 间 特 性 方面 考虑 ,可 测试 软件 配置 项 的 响应 时 间 ,平均 响应 时 间 、 响 应 极限 时 间 ; 
还 可 测试 软件 配置 项 的 吞吐 量 、 平 均 知 吐 量 、 极 限 吞 吐 量 ;测试 软件 配置 项 的 周转 时 间 、 平 
均 周 转 时 间 、 周 转 时 间 极 限 。 

响应 时 间 指 软件 配置 项 为 完成 一 项 规定 任务 所 需 的 时 间 ; 平 均 响 应 时 间 指 软件 配置 
项 执行 若干 并 行 任务 所 用 的 平均 时 间 ; 响 应 极限 时 间 指 在 最 大 负载 条 件 下 ,软件 配置 项 完 
成 某 项 任务 需要 时 间 的 极限 ;吞吐 量 指 在 给 定 的 时 间 周 期 内 软件 配置 项 能 成 功 完成 的 任 
务 数量 ;平均 吞吐 量 指 在 一 个 单位 时 间 内 软件 配置 项 能 处 理 并 发 任务 的 平均 数 ; 极 限 甜 吐 
量 指 在 最 大 负载 条 件 下 在 给 定 的 时 间 周 期 内 软件 配置 项 能 处 理 的 最 多 并 发 任务 数 ; 周 转 
时 间 指 从 发 出 一 条 指令 开始 到 一 组 相关 的 任务 完成 所 用 的 时 间 ; 平 均 周 转 时 间 指 在 一 个 
特定 的 负载 条 件 下 对 一 些 并 发 任务 ,从 发 出 请 求 到 任务 完成 所 需要 的 平均 时 间 ; 周 转 时 间 
极限 指 在 最 大 负载 条 件 下 ,软件 配置 项 完成 一 项 任务 所 需要 时 间 的 极限 。 

在 测试 时 ,应 标识 和 定义 适合 于 软件 应 用 的 任务 ,并 对 多 项 任务 进行 测试 ,而 不 是 仅 
测 一 项 任务 。 软 件 应 用 任务 的 例子 如 在 通信 应 用 中 的 切换 .数据 包 发 送 , 在 控制 应 用 中 的 
事件 控制 ,在 公共 用 户 应 用 中 由 用 户 调用 的 功能 产生 的 一 个 数据 的 输出 等 。 

2) 资源 利用 性 

从 资源 利用 性 方面 考虑 ,可 测试 软件 配置 项 的 输入 /输出 设备 ,内存 和 传输 资源 。 

(1) 执行 大 量 的 并 发 任务 ,测试 输入 /输出 设备 的 利用 时 间 。 

(2) 在 使 输入 /输出 负载 达到 最 大 的 条 件 下 ,运行 软件 配置 项 ,测试 输入 /输出 负载 
极限 。 

(3) 并 发 执行 大 量 的 任务 ,测试 用 户 等 待 输入 /输出 设备 操作 完成 需要 的 时 间 。 建 议 
调查 几 次 测试 与 运行 实例 中 的 最 大 时 间 与 时 间 分 布 。 

(4) 在 规定 的 负载 下 和 在 规定 的 时 间 范 围 内 运行 软件 配置 项 ,测试 内 存 的 利用 情况 。 

(5) 在 最 大 负载 下 运行 软件 配置 项 ,测试 内 存 的 利用 情况 。 
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(6) 并 发 执行 规定 的 数 个 任务 ,测试 软件 配置 项 的 传输 能 力 。 
(7) 在 最 大 负载 条 件 下 和 在 规定 的 时 间 周 期 内 测试 传输 资源 的 利用 情况 。 
(8) 在 传输 负载 最 大 的 条 件 下 ,测试 不 同 介质 同步 完成 其 任务 的 时 间 周 期 。 


8.6.5 维护 性 


软件 的 维护 性 包括 易 分 析 性 、 易 改变 性 和 易 测试 性 等 方面 。 

(1) 易 分 析 性 。 设 计 各 种 情况 的 测试 用 例 运行 软件 配置 项 ,并 监测 配置 项 的 运行 状 
态 数据 ,检查 这 些 数 据 是 否 容易 获得 .内容 是 否 充分 。 如 果 软 件 配 置 项 具有 诊断 功能 ,应 
测试 该 功能 。 

(2) 易 改 变性 。 测 试 能 否 通过 参数 来 改变 软件 配置 项 。 

(3) 易 测 试 性 。 可 测试 软件 配置 项 内 置 的 测试 功能 确认 它们 是 否 完整 和 有 效 。 


8.6.6 可 移植 性 


软件 的 可 移植 性 包括 适应 性 、 易 安装 性 、 共 存 性 、 易 蔡 换 性 等 方面 。 

1) 适应 性 方面 

从 适应 性 方面 考虑 ,可 测试 软件 配置 项 : 

(1) 对 诸如 数据 文件 .数据 块 或 数据 库 等 数据 结构 的 适应 能 力 ， 

(2) 对 硬件 设备 和 网 络 设施 等 硬件 环境 的 适应 能 力 ; 

(3) 对 系统 软件 或 并 行 的 应 用 软件 等 软件 环境 的 适应 能 力 ; 

(4) 是 否 易于 移植 。 

2) 易 安装 性 方面 

从 易 安 装 性 方面 考虑 可 测试 软件 配置 项 安装 的 工作 量 ,安装 的 可 定制 性 、 安 装 设计 的 
完备 性 、 安 装 操作 的 简易 性 .是否 容易 重新 安装 。 

安装 设计 的 完备 性 可 分 为 3 级 。 

(1) 最 好 : 设计 了 安装 程序 并 编写 了 安装 指南 文档 。 

(2) 好 : 仅 编写 了 安装 指南 文档 。 

(3) 差 : 无 安装 程序 和 安装 指南 文档 。 

安装 操作 的 简易 性 可 分 为 4 级 。 

(1) 非常 容易 : 只 需 启动 安装 功能 并 观察 安装 过 程 。 

(2) 容易 : 只 需 回 答 安装 功能 中 提出 的 问题 。 

(3) 不 容易 : 需要 从 表 或 填充 框 中 看 参数 。 

(4) 复杂 : 需要 从 文件 中 寻找 参数 改变 或 写 它们 。 

3) 共存 性 方面 

从 共存 性 方面 考虑 ,可 测试 软件 配置 项 与 其 他 软件 共同 运行 的 情况 。 

4) 易 蔡 换 性 方面 

当 蔡 换 整 个 不 同 的 软件 配置 项 和 用 同一 系列 的 高 版 本 替换 低 版 本 时 ,在 易 蔡 换 性 方 
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面 , 可 考虑 测试 软件 配置 项 : 
(1) 能 否 继 续 使 用 被 其 蔡 代 的 软件 使 用 过 的 数据 ; 
(2) 是 否 具有 被 其 蔡 代 的 软件 中 类 似 的 功能 。 


8.6.7 依从 性 


当 软 件 配置 项 在 功能 性 、 可 靠 性 、. 易 用 人 性、 效率、 维护 性 和 可 移植 性 方面 遵循 了 相关 的 
标准 、 约 定 、 风 格 指南 或 法 规 时 ,应 酌情 进行 测试 。 


8.7 配置 项 测试 过 程 
软件 配置 项 测试 一 般 采 用 黑 盒 测 试 方法 。 
8.7.1 测试 策划 


测试 分 析 人 员 应 根据 测试 合同 (或 项 目 计划 和 被 测 软件 的 需求 规格 说 明 ( 含 接口 需 
求 规格 说 明 ) .设计 文档 ( 含 接口 设计 文档 ) 对 被 测 软件 配置 项 进行 分 析 , 并 确定 以 下 内 容 ， 

(1) 确定 测试 充分 性 要 求 。 根 据 软件 配置 项 的 重要 性 和 完整 性 级 别 , 确 定 测试 应 履 
盖 的 范围 及 每 一 范围 所 要 求 的 覆盖 程度 。 

(2) 确定 测试 终止 的 要 求 。 指 定 测试 过 程 正常 终止 的 条 件 (如 测试 的 充分 性 要 求 是 
否 达到 ) ,并 确定 导致 测试 过 程 异 常 终止 的 可 能 情况 (如 接口 错误 ) 。 

(3) 确定 用 于 测试 的 资源 要 求 。 包 括 软 件 (如 操作 系统 、 编 译 软件 ,测试 结果 获取 和 
处 理 软 件 、 测 试 驱 动 软件 等 ) ,硬件 (如 计算 机 设备 接口 等 )、 人 员 数 量 、 人 员 技 能 等 。 

(4) 确定 需要 测试 的 软件 特性 。 根 据 软件 测试 合同 (或 项 目 计划 ) 及 软件 需求 规格 说 
明 ( 含 接口 需求 规格 说 明 ) ,设计 文档 ( 含 接口 设计 文档 ) 的 描述 确定 软件 配置 项 的 功能 ,性 
能 、 状 态 、 接 口 .数据 结构 、 设 计 约 束 等 内 容 和 要 求 ,对 其 标识 。 若 需要 ,将 其 分 类 。 从 中 确 
定 需 测试 的 软件 特性 。 

(5) 确定 测试 需要 的 技术 和 方法 。 如 测试 数据 生成 和 验证 技术 、 是 否 使 用 标准 测试 
集 等 。 

(6) 根据 测试 合同 (或 项 目 计划 ) 的 要 求 和 被 测 软 件 的 特点 ,确定 测试 准 出 条 件 。 

(7) 确定 由 资源 和 被 测 软 件 配 置 项 决定 的 配置 项 测试 活动 的 进度 。 

(8) 对 测试 工作 进行 风险 分 析 与 评估 并 制定 应 对 措施 。 

根据 上 述 分 析 研 究 结果 ,按照 测试 规范 的 要 求 编写 软件 配置 项 测试 计划 。 

应 对 软件 配置 项 测试 计划 进行 评审 ,评审 测试 的 范围 .内 容 、 资 源 和 进度 ,各 方 责任 等 
是 否 明确 ,测试 方法 是 否 合理 `\ 有 效 和 可 行 ,风险 的 分 析 、 评 估 与 对 策 是 否 准确 可 行 , 测 试 
文档 是 否 符合 规范 ,测试 活动 是 否 独立 等 。 当 测试 活动 由 被 测 软件 的 供 方 实施 时 ,软件 配 
置 项 测试 计划 的 评审 应 纳入 被 测 软件 的 需求 分 析 阶 段 评审 ; 当 测 试 活动 由 独立 的 测试 机 
构 实 施 时 ,软件 配置 项 测试 计划 应 通过 软件 的 需 方 、 供 方 和 有 关 专 家 参加 的 评审 ,通过 评 
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审 后 进入 下 一 步 工 作 。 


8.7.2 测试 设计 


测试 设计 工作 由 测试 设计 人 员 和 测试 程序 员 完 成 ,一 般 根据 配置 项 测试 计划 完成 以 
下 于 必 。 

(1) 设计 测试 用 例 。 将 需 测试 的 软件 特性 分 解 ,针对 分 解 后 的 每 种 情况 设计 测试 
用 例 。 

(2) 获取 测试 数据 ,包括 获取 现 有 的 测试 数据 和 生成 新 的 数据 ,并 按照 要 求 验证 所 有 
数据 。 

(3) 确定 测试 顺序 。 可 从 资源 约束 、 风 险 以 及 测试 用 例 失效 造成 的 影响 或 后 果 几 个 
方面 考虑 。 

(4) 获取 测试 资源 。 对 于 支持 测试 的 软件 ,有 的 需要 从 现 有 的 工具 中 选 定 ,有 的 需要 
开发 。 

(5) 编写 测试 程序 ,包括 开发 测试 支持 工具 。 

(6) 建立 和 校准 测试 环境 。 

(7) 按照 测试 规范 的 要 求 编写 软件 配置 项 测试 说 明 。 

应 对 软件 配置 项 测试 说 明 进 行 评审 。 评 审 测试 用 例 是 否 正确 、 可 行 和 充分 ,测试 环境 
是 否 正确 合理, 测试 文档 是 否 符 合 规范 。 当 测试 活动 由 被 测 软 件 的 供 方 实 施 时 ,软件 配 
置 项 测试 说 明 应 通过 软件 的 需 为 和 有 关 专 家 参加 的 评审 ; 当 测 试 活动 由 独立 的 测试 机 构 
实施 时 ,软件 配置 项 测试 说 明 应 通过 软件 的 需 方 、 供 方 和 有 关 专 家 参加 的 评审 ,通过 评审 
后 进入 下 一 步 工作 。 


8.7.3 测试 执行 


执行 测试 的 工作 由 测试 员 和 测试 分 析 员 完成 。 

测试 员 的 主要 工作 是 执行 配置 项 测试 计划 和 配置 项 测试 说 明 中 规定 的 测试 项 目 和 内 
容 。 在 执行 过 程 中 ,测试 员 应 认真 观察 并 如 实地 记录 测试 过 程 、 测 试 结果 和 发 现 的 差错 ， 
认真 填写 测试 记录 。 

测试 分 析 员 的 工作 主要 有 如 下 两 方面 。 

(1) 根据 每 个 测试 用 例 的 期 望 测试 结果 、 实 际 测试 结果 和 评价 准则 判定 该 测试 用 例 
是 否 通 过 。 如 果 不 通过 ,测试 分 析 员 应 认真 分 析 情 况 , 并 根据 情况 采取 相应 措施 。 

(2) 当 所 有 的 测试 用 例 都 执行 完毕 ,测试 分 析 员 要 根据 测试 的 充分 性 要 求 和 失效 记 
录 , 确 定 测试 工作 是 否 充 分 是 否 需 要 增加 新 的 测试 。 当 测试 过 程 正常 终止 时 ,如 果 发 现 测 
试 工作 不 足 , 应 对 软件 配置 项 进行 补充 测试 ,直到 测试 达到 预期 要 求 , 并 将 附加 的 内 容 记 
录 在 软件 配置 项 测试 报告 中 。 当 测试 过 程 异常 终止 时 ,应 记录 导致 终止 的 条 件 、 未 完成 的 
测试 和 未 被 修正 的 差错 。 
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8.7.4 测试 总 结 


测试 分 析 员 应 根据 被 测 软件 配置 项 的 需求 规格 说 明 ( 含 接口 规格 说 明 )、 软 件 设计 文 
档 、 配 置 项 测试 计划 ,配置 项 测试 说 明 、 测 试 记录 和 软件 问题 报告 单 等 ,分 析 和 评价 测试 工 
作 一 般 应 在 测试 报告 中 记录 : 

(1) 总 结 配置 项 测试 计划 和 配置 项 测试 说 明 的 变化 情况 及 其 原因 

(2) 对 测试 异常 终止 情况 ,确定 未 能 被 测试 活动 充分 覆盖 的 范围 ; 

(3) 确定 未 能 解决 的 软件 测试 事件 以 及 不 能 解决 的 理由 ; 

(4) 总 结 测试 所 反映 的 软件 配置 项 与 软件 需求 规格 说 明 ( 含 接口 规格 说 明 )、 软 件 设 
计 文 档 ( 含 接口 设计 文档 ) 之 间 的 差异 ; 

(5) 将 测试 结果 连同 所 发 现 的 差错 情况 同 软件 需求 规格 说 明 ( 含 接口 规格 说 明 )、 软 
件 设计 文档 ( 含 接口 设计 文档 ) 对 照 ,评价 软件 配置 项 的 设计 与 实现 ,提出 软件 改进 建议 ; 

(6) 按照 测试 规范 的 要 求 编写 软件 配置 项 测试 报告 ,该 报告 应 包括 : 测试 结果 分 析 、 
对 软件 配置 项 的 评价 和 建议 ; 

(7) 根据 测试 记录 和 软件 问题 报告 单 编写 测试 问题 报告 。 

应 对 软件 配置 项 测试 的 执行 活动 .软件 配置 项 测试 报告 ,测试 记录 、 测 试问 题 报告 进 
行 评审 。 评 审 测试 执行 活动 的 有 效 性 ,测试 结果 的 正确 性 和 合理 性 。 评 审 是 否 达到 了 测 
试 目 的 ,测试 文档 是 否 符合 要 求 。 当 测试 活动 由 被 测 软件 的 供 方 实施 时 ,评审 应 由 软件 的 
供 方 组 织 ,软件 的 需 方 和 有 关 专 家 参加 ; 当 测 试 活动 由 独立 的 测试 机 构 实 施 时 评审 应 由 软 
件 测试 机 构 组 织 ,软件 的 需 方 、 供 方 和 有 关 专 家 参加 。 


8.8 确认 测试 


传统 意义 上 的 确认 测试 是 指 根据 软件 需求 说 明 书 中 定义 的 全 部 功能 .性 能 要 求 以 及 
确认 测试 计划 ,来 测试 整个 软件 系统 是 否 达 到 了 要 求 ,并 提交 最 终 的 用 户 手册 和 操作 
手册 。 

确认 测试 是 软件 产品 付 之 实际 使 用 之 前 的 一 道 既 完整 又 系统 的 检验 , 它 直接 影响 到 
软件 产品 的 质量 ,是 软件 质量 保证 的 一 个 关键 环节 。 尽 管 确认 测试 的 某 些 部 分 是 在 单元 
测试 和 集成 测试 相同 的 条 件 下 进行 的 ,而 且 所 用 的 数据 相同 ,但 确认 测试 仍 是 必要 的 ,这 
是 因为 : 

。 错误 改正 之 后 所 进行 的 集成 测试 是 局 部 性 的 ; 

。 系统 的 需求 说 明 书 在 软件 开发 过 程 中 可 能 会 有 所 改变 ; 

。 由 于 每 个 系统 都 是 由 各 功能 独立 的 模块 组 合 而 成 的 ,即使 设计 人 员 费 心 仔细 进行 

集成 测试 ,但 错误 仍 在 所 难免 ; 

。 有 利于 进一步 保证 软件 产品 的 质量 。 

软件 经 过 开发 测试 之 后 , 留 给 确认 测试 的 任务 有 以 下 几 项 。 

(1) 系统 级 的 功能 测试 。 
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(2) 正规 的 系统 验收 测试 。 

(3) 强度 测试 。 在 加 载 所 有 负荷 的 情况 下 ,运行 系统 以 验证 系统 的 负荷 能 力 。 

(4) 负荷 和 性 能 测试 。 在 实际 运行 的 环境 下 是 否 满足 系统 的 功能 。 

(5) 背景 测试 。 在 实际 负荷 情况 下 测试 多 道 程序 多 重 作 业 的 能 力 。 

(6) 配置 测试 。 在 所 有 指定 组 合 的 逻辑 /物理 设备 下 进行 测试 。 

(7) 恢复 测试 。 测 试 系统 能 否 从 软件 /硬件 故障 情况 下 恢复 原先 控制 的 数据 。 

(8) 安全 性 测试 。 测 试 并 保证 系统 的 安全 性 ,使 不 合法 用 户 不 能 使 用 该 系统 。 

其 中 ,第 (1)、(2)、(3) 项 是 每 个 系统 都 要 求 的 ;第 (4) 项 是 所 有 联机 系统 所 需要 的 ;第 
(5) 项 除了 最 简单 的 非 批 操作 处 理 系统 之 外 ,大 多 数 系统 是 需要 的 ,但 应 用 程序 则 不 一 定 
需要 ;第 (6) 项 适用 于 能 改变 物理 和 逻辑 关系 的 系统 以 及 计算 机 和 所 有 备用 设备 都 能 使 用 
的 实际 系统 ;第 (7) 项 适用 于 尽管 软 /硬件 故障 ,也 能 恢复 原先 控制 数据 的 系统 ,或 者 能 自 
动 切换 到 备用 设备 的 系统 ;第 (8) 项 用 于 所 有 对 外 开放 性 的 系统 。 

确认 测试 的 实施 步骤 如 下 : 

(1) 在 模拟 的 环境 中 进行 强度 测试 , 即 在 事先 规定 的 一 个 时 期 内 运行 软件 的 所 有 功 
能 ,以 证 明 该 软件 与 原 目 标的 不 符 之 处 (错误 ) 。 

(2) 执行 测试 计划 中 提出 的 所 有 确认 测试 。 

(3) 使 用 用 户 手册 和 操作 手册 ,以 证 实 其 实用 性 和 有 效 性 ,并 改正 其 中 的 错误 。 

(4) 分 析 测 试 结果 , 找 出 产生 错误 的 原因 。 

(5) 书写 确认 测试 分 析 报 告 。 

(6) 确认 测试 结束 后 ,书写 整个 项 目的 开发 总 结 报告 。 

(7) 对 所 有 文件 进行 整理 。 

(8) 评审 。 

确认 测试 应 该 由 独立 测试 小 组 进行 ,并 邀请 用 户 一 起 参加 ;系统 存储 设备 、 输 入 输出 
通道 ,以 及 处 理 时 间 等 必须 有 足够 的 余 量 ;全 部 预期 结果 、 测 试 结果 及 测试 数据 应 存档 
保留 。 


8.9 习题 


请 参考 课文 内 容 以 及 其 他 资料 ,完成 下 列 选择 题 。 

(1) 在 基于 调用 图 的 集成 中 ,有 一 种 集成 策略 就 是 对 应 于 调用 图 的 每 一 条 边 建立 并 
执行 一 个 集成 测试 会 话 , 即 对 有 调用 关系 的 两 个 程序 单元 进行 集成 测试 ,这 样 可 以 免除 驱 
动 和 桩 的 编写 ,这 种 集成 策略 是 (。” )。 

A. 持续 集成 B. 三 明治 集成 ”C. 成 对 集成 D. 相 邻 集成 

(2) 在 集成 测试 阶段 ,人 们 关注 的 一 种 主要 的 覆盖 是 ( ) 。 

A. 功能 覆盖 B. 语句 覆盖 
C. 基本 路 径 覆 盖 D. 条 件 覆 盖 
(3) 以 下 说 法 中 错误 的 是 ( 和 
A. 进入 集成 测试 要 求 待 集成 的 软件 单元 均 已 通过 单元 测试 
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B. 软件 集成 测试 应 测试 软件 单元 之 间 的 所 有 调用 
C. 软件 集成 测试 应 对 已 集成 软件 进行 必要 的 静态 测试 ,并 先 于 动态 测试 
D. 软件 集成 测试 应 由 软件 供 方 组织 并 实施 不 得 委托 第 三 方 进行 
(4) 下 面 不 属于 集成 测试 层次 的 是 ( 交 
A. 应 用 环境 集成 测试 B. 模块 内 集成 测试 
C. 子 系统 内 集成 测试 D. 子 系统 间 集 成 测试 
(5) 适合 使 用 自 底 向 上 的 增 量 式 集成 方式 进行 集成 和 测试 的 产品 应 属于 ( ka 
A. 使 用 了 严格 的 净 室 软件 工程 过 程 的 产品 
B. 控制 模块 其 有 较 大 技术 风险 的 产品 
C. 采用 了 契约 式 设计 的 产品 
D. 在 极限 编程 中 使 用 了 探索 式 开 发 风格 的 产品 
(6) 关于 软件 集成 测试 ,下 列 说 法 不 正确 的 是 ( Y's 
A. 集成 测试 的 对 象 包括 任意 一 个 软件 单元 集成 到 计算 机 软件 系统 的 组 装 过 程 
B. 集成 测试 的 对 象 包括 任意 一 个 组 装 得 到 的 软件 系统 
C. 软件 集成 测试 的 目的 是 检验 单元 之 间 、 软 件 单元 和 已 集成 的 软件 系统 之 间 的 
接口 关系 
D. 软件 的 集成 测试 不 需要 验证 已 集成 软件 系统 是 否 符合 设计 要 求 
(7) 集成 测试 对 系统 内 部 的 交互 以 及 集成 后 系统 功能 检验 了 何 种 质量 特性 ? 〈 
A. 正确 性 B. 可 靠 性 C. 可 试用 性 D. 可 维护 性 
(8) 以 下 说 法 中 错误 的 是 ( » 
A. 软件 配置 项 测试 的 目的 是 检验 软件 配置 项 与 软件 需求 规格 说 明 的 一 致 性 
B. 软件 配置 项 测试 一 般 由 软件 供 方 组 织 , 由 独立 于 软件 开发 的 人 员 实 施 , 软 件 
开发 人 员 配 合 
C. 软件 配置 项 测试 要 求 被 测 软件 配置 项 已 通过 单元 测试 和 集成 测试 
D. 软件 配置 项 测试 不 得 委托 第 三 方 实施 
(9) 在 以 下 有 关 集 成 测试 的 说 法 中 ,错误 的 说 法 是 ( 和 
A. 自 底 向 上 集成 的 缺点 是 在 早期 不 能 进行 并 行 测试 ,不 能 充分 利用 人 力 
B. 自 底 向 上 集成 的 优点 是 减少 了 编写 桩 模块 的 工作 量 
C. 自 项 向 下 集成 的 优点 是 能 够 较 早 地 发 现在 高 层 模 块 接口 、 控 制 等 方面 的 
问题 
D. 自 项 向 下 集成 的 缺点 是 需要 设计 许多 的 桩 模块 测试 的 开销 较 大 
(10) 以 下 说 法 中 错误 的 是 ( Ns 
A. 进入 集成 测试 要 求 待 集成 的 软件 单元 均 已 通过 单元 测试 
B. 软件 集成 测试 应 测试 软件 单元 之 间 的 所 有 调用 
C. 软件 集成 测试 应 对 已 集成 软件 进行 必要 的 静态 测试 ,并 先 于 动态 测试 
D. 软件 集成 测试 应 由 软件 供 方 组 织 并 实施 ,不 得 委托 第 三 方 进 行 
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8.10 实验 与 思考 
8.10.1 实验 目的 


本 节 “ 实 验 与 思考 "的 目的 : 

(1) 熟悉 集成 测试 与 配置 项 (确认 ) 测 试 的 相关 概念 。 

(2) 通过 分 析 一 个 简单 的 ATM 机 中 描述 验证 信用 卡 PIN 活动 的 有 限 状 态 机 , 画 出 
与 此 有 限 状 态 机 等 价 的 控制 流 图 ;确定 基本 测试 路 径 集 ; 并 为 每 一 条 独立 路 径 设计 一 组 测 
试用 例 , 以 覆盖 基本 测试 路 径 。 

(3) 通过 深入 分 析 一 个 C 源 程序 , 画 出 程序 中 所 有 函数 的 控制 流程 图 ;设计 一 组 测试 
用 例 ,使 该 程序 所 有 函数 的 语句 覆盖 率 和 分 支 覆盖 率 均 能 达到 100%% 。 


8.10.2 工具 /准备 工作 


在 开始 本 实验 之 前 ,请 认真 阅读 课程 的 相关 内 容 。 
需要 准备 一 台 带 有 浏览 器 ,能 够 访问 因特网 的 计算 机 。 


8.10.3 ”实验 内 容 与 步骤 
1) 概念 理解 。 


请 查阅 有 关 资 料 ,根据 你 的 理解 和 看 法 ,给 出 下 列 概念 的 定义 : 
(1) 集成 测试 


(2) 配置 项 测试 : 


(3) 确认 测试 : 


2) 图 8-1 是 一 个 简单 的 ATM 机 中 描述 验证 信用 卡 PIN 活动 的 有 限 状态 机 。 其 中 
包含 五 个 用 “ 圆 角 和 矩形 "表示 的 状态 和 八 个 用 “一 ”表示 的 转移 。 转 移 上 的 标签 所 遵循 的 
是 : 横 线 上 方 是 引起 转移 的 事件 , 横 线 下 方 是 与 该 转移 相关 联 的 行动 。 该 有 限 状态 机 人 允 
许 储户 有 3 次 输入 PIN 的 机 会 ,如 果 3 次 都 输入 错误 , 则 停止 交易 退 卡 。 

请 完成 下 列 工作 。 

(1) 请 在 一 白 纸 上 画 出 与 此 有 限 状 态 机 等 价 的 控制 流 图 ,并 粘贴 于 此 处 (相关 说 明 请 
标注 于 图 上 ) : 
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第 三 次 PIN 错误 
显示 重新 输入 PIN 


无 效 卡 
有 效 卡 显示 无 效 卡 退 卡 


第 一 次 PIN 错误 
显示 重新 输入 PIN 


S2: 等 待 输入 PIN 
(第 一 次 ) 
do: 输入 PIN 


第 二 次 PIN 错误 
显示 重新 输入 PIN 


辟 示 进 择 事务 FINE 确 一 
显示 选择 事务 4 等 入 输入 PIN 


PIN 正 确 (第 三 次 ) 
辟 寺 选择 事务 do: 输 和 PIN 
图 8-1 有 限 状 态 机 


(2) 确定 基本 测试 路 径 集 。 

计算 图 8-1 的 MeCabe 环 路 复杂 性 : 判定 该 程序 V(G) 是 
确定 基本 的 测试 路 径 共 有 : 

路 径 1: 


路 径 2; 


路 径 3: 


路 径 4: 


路 径 5: 


(3) 为 每 一 条 独立 路 径 设计 一 组 测试 用 例 ,以 覆盖 基本 测试 路 径 。 


四 日 思 昌 日 


3) 已 知 C 源 程序 如 下 : 


/* Input today's date, output tamorrow's date * / 
/* version 2 */ 
# incluqde< stdio.h > 
struct ydate 
{ int day; int month; int year; }7 
int leap( struct ydate d ) 
{ 证 ( (d.year $4=0 && d.year $100 !=0) || (d.year $400==0)) 
retum 1; 
else 
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} 


retum 0; 


int numdays( struct ydate d ) 


{ 


} 


int day; 
static int daytab[ ]={ 31, 28, 31, 30, 31, 30, 31, 31, 30, 31, 30, 31 }; 
if ( lesp( d) ss d.month==2) 
day= 29; 
else 
day= daytab[ d.month -1 ]; 
rentum day; 


int min( void ) 


‘ 


} 


struct ydate today, tamorrow; 

printf( "fomat of date is: year, month, day 输 入 的 年 月 .日 之 间 应 用 逗号 隔 开 \n" ) ; 
printf(" todayis:"); 

scanf( "和 di $d, $d", gtoday.year, gtoday.month, gtoday.day); 


while (0>=today.year | | today.year> 65535 | | 0 >=today.month | | today.month> 12| | 0 >= today. 


day | | today.day> numdays( today ) ) 
{ Printf( "input date errorlreenter the day!\n" ); 
printf(" todayis:"); 
Scanf (Sd, $d, $d", gtoday.year, gtoday.month, &today.day ) ; 
} 
if (today.day !=numdays( today ) ) 
{ tamorrow. year= today.year; 
tamorrow.month= today.month; 
tamorrow.day= today.day+ 1; 
} 
else if ( today.mcnth==12 ) 
{ tamorrow.year= today.year + 1; 
tomprrow.mcnth= 1; 
tamorrow.day= 1; 


{ tamorrow. year= today. year; 
tamorrow.month= today.montht 1; 
tamorrow.day= 1; 
} 
printf( "tamorrow is : $d, $d, $d \n\n", tomrrow.year, 
tamorrow.month, taomrrow.day ) ; 


(1) 请 在 一 白 纸 上 画 出 程序 中 所 有 函数 的 控制 流程 图 ,并 粘贴 于 此 处 (相关 说 明 请 标 
注 于 图 上 》。 
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一 — - 粘贴 处 一 一 一 


(2) 设计 一 组 测试 用 例 ( 如 表 8-1 所 示 ) ,使 该 程序 所 有 函数 的 语句 覆盖 率 和 分 支 覆 
盖 率 均 能 达到 100%。 如 果 认 为 该 程序 的 语句 或 分 支 覆 盖 率 无 法 达到 100% , 需 说 明 为 
诈 闪 。 
表 8-1 设计 的 测试 用 例 
用 例 编号 | 年 月 日 leap numdays while if…else if…else | 输出 结果 


8.10.4 实验 总 结 


8.10.5 实验 评价 (教师 ) 


8.11 阅读 与 分 析 : 手机 基本 功能 测试 


俗话 说 “人 靠 衣裳 马 靠 鞍 ”, 良 好 的 外 观 往往 能 够 吸引 眼球 ,激发 顾客 (用 户 ) 的 购买 欲 
望 ,最 终 达 成 商业 利益 的 实现 。 软 件 的 设计 亦 如 此 ,Window XP 在 商业 上 的 巨大 成 功 很 
大 一 方面 来 自 于 它 一 改 往日 呆板 ,以 突出 “应 用 ”的 灰色 界面 ,从 “用 户 体 验 ” 角 度 来 设计 界 
面 , 使 界面 具有 较 大 的 亲和力 。 如 今 ,良好 的 人 机 界面 设计 越 来 越 受到 系统 分 析 、 设 计 人 
员 的 重视 ,但 是 如 何 对 设计 的 人 机 界面 (包括 帮助 等 ) 进 行 测试 ,给 出 客观 公正 的 评价 , 却 
鲜 见 于 报端 。 
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我 们 知道 :“ 不 立 规 抵 无 以 成 方圆 ”。 在 软件 界面 设计 强调 张扬 个 性 的 同时 ,我 们 不 
能 忘记 软件 界面 的 设计 先 要 讲求 规矩 、 简 洁 、 一 致 、 易 用 ,这 是 一 切 软 件 界面 设计 和 测试 的 
必 循 之 道 ,是 软件 人 机 界面 在 突出 自我 时 的 群体 定位 。 美 观 、 规 整 的 软件 人 机 界面 破除 新 
用 户 对 软件 的 生 朴 感 , 使 老 用 户 更 易于 上 手 、 充 分 重用 已 有 使 用 经 验 , 并 尽量 少 犯 错误 。 
由 此 我 们 在 对 软件 人 机 界面 进行 测试 时 (设计 评审 阶段 和 系统 测试 阶段 结合 进行 ) ,不 妨 
从 下 列 一 些 角度 测试 软件 的 人 机 界面 。 


1. 一 致 性 测试 


一 致 性 是 软件 人 机 界面 的 一 个 基本 要 求 。 目 的 是 使 用 户 在 使 用 时 ,很 快 熟悉 软件 的 
操作 环境 ,同时 避免 对 相关 软件 操作 发 生理 解 歧义 。 这 要 求 我 们 在 进行 测试 时 ,需要 判断 
软件 的 人 机 界面 是 否 可 以 作为 一 个 整体 而 存在 。 下 面 是 进行 一 致 性 测试 的 一 些 参考 
意见 : 


提示 的 格式 是 否 一 致 ; 

。 帮助 的 格式 是 否 一 致 ; 

提示 、 菜 单 、 帮 助 中 的 术语 是 否 一 致 ; 

各 个 控件 之 间 的 对 齐 方式 是 否 一 致 ; 

。 输入 界面 和 输出 界面 在 外 观 、 布 局 交互 方式 上 是 否 一 致 ; 

命令 语言 的 语法 是 否 一 致 ; 

。 功能 类 似 的 相关 界面 在 外 观 、 布 局 ,交互 方式 上 是 否 一 致 (如 商品 代码 检索 和 商品 
名 称 检索 ); 

。 存在 同一 产品 族 的 时 候 , 与 其 他 产品 在 外 观 、 布 局 ,交互 方式 上 是 否 一 致 ( 如 

Office 产品 族 ); 

同一 层次 的 文字 在 同一 种 提示 场合 (一 般 情况 突显、 警告 等 ) 在 文字 大 小 、 字 体 、 

磊 色 、 对 齐 方式 等 方面 是 否 一 致 ; 

多 个 连续 界面 依次 出 现 的 情况 下 ,界面 的 外 观 、 操 作 方式 是 否 一 致 (当然 可 能 会 有 

例外 ,比如 操作 结束 的 界面 ) 。 


2. 信息 反馈 测试 


假设 系统 的 使 用 者 是 一 个 初出 茅 庐 的 生 手 ,你 能 指望 她 (他 ) 在 进行 操作 时 不 出 错 吗 ? 
但 这 还 不 是 问题 的 所 在 ,问题 的 关键 在 于 我 们 都 会 犯错 误 ,都 有 自己 不 了 解 的 东西 。 如 何 
避免 错误 发 生 , 这 要 求 我 们 的 人 机 界面 有 足够 的 输入 检查 和 错误 提示 功能 。 通 过 信息 反 
馈 , 用 户 得 到 出 错 提 示 或 是 任务 完成 的 赞许 之 语 。 但 不 幸 的 是 ,很 多 系统 在 此 方面 都 做 的 
不 尽 如 人 意 。 下 面 是 对 这 类 测试 的 一 些 参考 意见 : 

。 系统 是 否 接受 客户 的 正确 输入 并 做 出 提示 (如 鼠标 焦点 跳 转 ); 

。 系统 是 否 拒绝 客户 的 错误 输入 并 做 出 提示 (如 弹出 警告 框 , 声 响 ); 

。 系统 显示 用 户 的 错误 输入 的 提示 是 否 正确 ,浅显 易 懂 (如 “ERR004? 这 样 的 提示 让 

人 不 知 所 云 ); 
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系统 是 否 在 用 户 输入 前 给 出 用 户 具体 输入 方式 的 提示 (如 网 站 注册 程序 ); 

系统 提示 所 用 的 图 标 或 图 形 是 否 具有 代表 性 和 警示 性 ; 

系统 提示 用 语 是 否 按 警 告 级 别 和 完成 程度 进行 分 级 (若非 菜 些 破坏 性 操作 ,请 对 
用 户 温和 一 些 ); 

系统 在 界面 (主要 是 菜单 .工具 条 ) 上 是 否 提供 突显 功能 (比如 鼠标 移动 到 控件 时 ， 
控件 图 标 变 大 或 颜色 变化 至 与 背景 有 较 大 反差 , 当 移 开 后 恢复 原状 ); 

系统 是 否 在 用 户 完 成 操作 时 给 出 操作 成 功 的 提示 (很 多 系统 都 缺少 这 一 步 ,使 用 
户 毫 无 成 就 感 ) 。 


3. 界面 简洁 性 测试 
你 的 人 机 界面 像 你 的 脸 一 样 对 称 \ 和 干净 吗 ? 我 们 往往 看 到 的 是 很 多 系统 在 人 机 界面 


设计 上 就 像 长 了 天 花 的 病人 。 因 此 我 们 不 得 不 对 其 进行 美容 前 的 检查 ,下 面 是 一 些 供 检 
查 的 建议 条 款 : 


。 用 户 界 面 是 否 存在 空白 空间 (没有 空白 空间 的 界面 是 杂乱 无 章 的 , 易 用 性 极 差 ); 

。 各 个 控件 之 间 的 间隔 是 否 一 致 ; 

。 各 个 控件 在 垂直 和 水 平方 向 上 是 否 对 齐 ; 

。 菜单 深度 是 否 在 三 层 以 内 (建议 不 要 超出 三 层 , 大 家 可 以 参考 微软 的 例子 ); 

。 界面 控件 分 布 是 否 按照 功能 分 组 (菜单 、 工 具 栏 . 单 选 框 组 、 复 选 框 组 \Frame 等 )， 
建议 采用 分 页 显示 并 提供 数据 排序 显示 功能 ) 。 

实际 上 ,一 个 处 理 该 类 测试 的 原则 性 的 东西 就 是 : 干掉 多 余 的 东西 , 尽 可 能 分 组 。 


4. 界面 美观 度 测试 
你 的 界面 美观 吗 ? 试想 一 个 服装 模特 穿 一 身 不 得 体 的 衣服 ,其 展示 效果 会 如 何 ? 我 


至 今 还 记得 在 学 习 美 学 时 老师 讲 过 的 一 句 话 : 美 是 对 比 的 产物 。 在 软件 界面 的 美观 度 测 
试 上 ,我 们 不 得 不 注意 下 面 的 一 些 建议 : 


外 。 


186 


。 前 景 与 背景 色 搭 配 是 否 反差 过 大 

前 景 与 背景 色 是 否 采用 较为 清淡 的 色调 而 不 是 深 色 (比如 用 天 蓝 色 而 不 用 深蓝 色 
和 墨绿 色 ); 

系统 界面 是 否 采用 了 超过 3 种 的 基本 色 ( 一 般 情况 下 不 要 超过 3 种 ); 

。 字体 大 小 是 否 与 界面 的 大 小 比例 协调 (一 般 中 文采 用 宋体 ,英文 采用 Arial 或 
Times New Roman, 日 文采 用 SimSun 或 明 朝 ); 

按钮 较 多 的 界面 是 否 禁止 缩放 (一 般 情况 下 不 宜 缩放 ,最 好 禁止 最 大 、 最 小 化 按 
人 钮 ); 

。 系统 是 否 提供 用 户 界面 风格 自 定义 功能 ,满足 用 户 个 人 偏好 。 


5. 用 户 动 作 性 测试 


“科学 是 懒 人 的 哲学 ”, 这 是 我 大 学 专业 老师 的 一 个 观点 。 我 们 的 计算 机 系统 也 不 例 
我 们 的 系统 能 让 用 户 尽 可 能 地 偷懒 吗 ( 少 动手 肘 , 少 记 命令 等 ), 从 这 个 角度 出 发 , 相 


集成 测试 与 配置 项 《确认 ) 测试 技术 


信 你 会 对 用 户 动作 性 测试 的 本 质 有 较 深 的 体会 。 我 相信 没有 一 个 测试 员 愿 意 做 的 多 而 收 
获 的 少 。 此 外 用 户 从 某 种 角度 上 是 心怀 不 测 的 挑 晨 者 和 掌 事 者 。 他 们 很 少 有 太 多 的 耐心 
来 对 待 他 们 寄 以 很 大 期 望 的 系统 。 下 面 是 一 些 判断 用 户 是 否 能 够 “偷懒 "> 和 "发 泄 防止 > 的 
测试 建议 : 

。 是 否 存 在 用 户 频繁 操作 的 快捷 键 ; 

。 是 否 允 许 动作 的 可 逆 性 (Undo,Redo); 

。 界面 是 否 有 对 用 户 的 记忆 要 求 ; 

。 系统 的 反应 速度 是 否 符合 用 户 的 期 望 值 ; 
是 否 存在 更 便捷 、 直 观 的 方式 来 取代 当前 界面 的 显示 方式 (如 用 菜单 界面 代替 命 
令 语 言 界面 ); 
用 户 在 使 用 时 任何 时 候 是 否 能 开启 帮 助 文档 (F1); 
。 系统 是 否 提供 模糊 查询 机 制 和 关键 字 提 示 机 制 减少 用 户 的 记忆 负担 (如 清华 紫光 

输入 法 的 模糊 音 设 定 ); 

。 是 否 对 可 能 造成 长 时 间 等 待 的 操作 提供 操作 取消 功能 ; 
。 是 否 支 持 对 错误 操作 进行 可 逆 性 处 理 , 返 回 原 有 状态 ; 
是 否 采用 相关 控件 (如 日 历 , 计 算 器 等 ) 替 代用 户 手 工 键盘 输入 ; 
选项 过 多 的 情况 下 是 否 采用 下 拉 列 表 或 者 关键 字 检 索 的 方式 供用 户 选择 ; 
。 系统 出 错时 是 否 存在 恢复 机 制 使 用 户 返回 出 错 前 状态 (如 Office XP 的 文件 
恢复 ); 
在 用 户 输 入 数据 之 前 ,用 户 输入 数据 后 才能 执行 的 操作 是 否 被 禁止 (如 特定 的 按 
钮 变 灰 ); 
。 系统 是 否 提供 “所 见 即 所 得 (WYIWG)? 或 “下 一 步 提示 ”的 功能 (如 预览 ) ; 


6. 行业 标准 测试 


每 个 行业 都 有 自己 的 一 套 标 识 体系 ,请 尽 可 能 不 要 与 其 “撞车 ”。 这 就 需要 我 们 的 人 
机 界面 测试 人 员 对 软件 行业 的 符号 体系 有 所 了 解 , 否 则 将 很 难 担 此 大 任 。 

。 界面 使 用 的 图 符 、 声 音 是 否 符合 软件 所 面向 领域 的 行业 符号 体系 标准 ; 

。 界面 所 使 用 的 术语 是 否 符合 软件 所 面向 领域 的 行业 命名 标准 ; 

。 界面 的 颜色 是 否 与 行业 代表 色彩 较为 相近 ; 

。 界面 的 背景 是 否 能 够 反映 行业 相关 主题 (如 反映 环保 的 界面 一 般 采 用 自然 风光 作 

为 背景 ); 

。 界面 的 设计 是 否 反 映 行 业 最 新 的 理念 和 大 众 趋势 。 

当然 ,每 一 个 软件 也 应 当 具 有 自己 的 一 些 个 性 ,这 些 个 性 是 体现 软件 开发 商 和 所 面向 
的 用 户 领域 的 特定 需要 的 。 比 如 微软 的 启动 界面 和 蔷 果 的 启动 界面 就 完全 是 两 码 事 。 一 
个 不 失 个 性 的 软件 ,其 本 身 就 是 软件 制作 商 的 “广告 代言 人 ”。 既 要 突出 制作 商 ,又 不 能 喧 
宾 村 主 。 下 面 我 们 给 出 一 些 常见 的 软件 个 性 测试 原则 : 

。 软件 的 安装 界面 是 否 有 单位 介绍 或 产品 介绍 ,并 拥有 自己 的 图 标 ; 

。 软件 的 安装 界面 是 否 不 同 于 通用 安装 工具 生成 的 界面 (如 金山 快 译 的 安装 界面 就 
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比较 有 特色 ); 

主 界面 的 图 标 是 否 为 制作 商 的 图 标 ; 

系统 启动 需要 长 时 间 等 待 时 ,是 否 存在 Splash 界面 , 它 是 否 包含 或 反映 制作 者 
信息 ; 

软件 是 否 有 版 本 查看 机 制 , 版 本 说 明 上 是 否 有 制作 者 或 用 户 的 标识 ; 

软件 界面 的 色彩 、 背 景 、 布 置 是 否 与 同类 产品 不 同 , 如 果 有 ,是 否 更 为 简洁 、 美 观 ; 
软件 界面 操作 与 同类 产品 相 比 ,是 否 能 够 减少 用 户 输入 的 频繁 度 ; 

软件 界面 操作 与 同类 产品 相 比 , 是 否 在 出 错 预防 机 制 和 提示 上 更 为 直观 .醒目 ; 
软件 界面 是 否 为 特殊 群体 或 特殊 应 用 提供 相应 的 操作 机 制 (如 Windows 的 放 
大 镜 ) 。 

总 而 言 之 ,软件 人 机 界面 的 测试 需要 一 个 立足 “共性 ”但 又 要 强调 “个 性 ”的 测试 思路 ， 
软件 人 机 界面 的 测试 与 其 他 类 型 测试 不 同 ,更 加 强调 从 用 户 的 角度 、 审 美观 去 看 待 待 测 
软件 。 

资料 来 源 : 领 测 软件 测试 网 ,2011-4-18。 
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经 过 集成 测试 和 配置 项 测试 之 后 ,分 散 开发 的 模块 被 连接 起 来 ,构成 相对 完整 的 体 
系 ,其 中 各 模块 间接 口 存 在 的 种 种 问题 都 已 基本 消除 ,进入 系统 测试 阶段 。 软 件 系统 测试 
的 目的 是 在 真实 系统 工作 环境 下 检验 完整 的 软件 配置 项 能 否 和 系统 正确 连接 ,并 满足 系 
统 . 子 系统 设计 文档 和 软件 开发 合同 规定 的 要 求 。 系 统 测试 应 充分 运行 系统 ,验证 整个 系 
统 是 否 满足 非 功能 性 的 质量 需求 ,如 : 

。 是 否 都 能 正常 工作 并 完成 所 赋予 的 任务 ? 

。 在 大 量 用 户 使 用 的 情况 下 ,能 否 经 得 住 考验 ? 

。 系统 出 错 了 能 否 很 快 恢复 或 者 从 故障 中 转移 出 去 ? 

。 是 否 能 长 期 .稳定 地 运行 ? 


9.1 系统 测试 的 定义 


通常 将 非 功能 性 测试 ,例如 压力 容量 .安全 性 、 可 靠 性 .性 能 等 看 做 是 系统 测试 ,以 区 
别 于 功能 测试 。 非 功能 性 测试 的 目的 虽然 有 所 不 同 , 但 其 手段 和 方法 在 一 定 程度 上 比较 
相似 ,都 采用 负载 测试 技术 。 为 了 模拟 用 户 的 操作 和 监控 系统 性 能 ,特别 针对 基于 网 络 的 
应 用 软件 ( 非 单机 应 用 软件 ), 只 有 借助 于 测试 工具 才能 完成 。 通 常 , 会 使 用 特定 的 测试 工 
具 来 模拟 超常 的 数据 量 或 其 他 各 种 负载 ,监测 系统 的 各 项 性 能 指标 ,如 线程 .CPU 内存 
等 使 用 情况 ,响应 时 间 ,数据 传输 量 等 。 

系统 测试 的 对 象 是 完整 的 .集成 的 计算 机 系统 ,重点 是 新 开发 的 软件 配置 项 的 集合 。 

系统 测试 按 合同 规定 要 求 执行 ,或 由 软件 的 需 方 或 由 软件 的 开发 方 组 织 , 由 独立 于 软 
件 开 发 的 人 员 实 施 ,软件 开发 人 员 配 合 。 如 果 系 统 测试 委托 第 三 方 实施 ,一 般 应 委托 国家 
认可 的 第 三 方 测试 机 构 。 应 加 强 系统 测试 的 配置 管理 。 已 通过 测试 的 系统 状态 和 各 项 参 
数 应 详细 记录 ,归档 保存 未 经 测试 负责 人 允许 ,任何 人 无 权 改变 。 

系统 测试 应 严格 按照 由 小 到 大 、 由 简 到 繁 、 从 局 部 到 整体 的 程序 进行 。 软 件 系 统 测试 
的 技术 依据 是 用 户 需求 (或 系统 需求 或 研制 合同 ) ,一 般 应 符合 以 下 技术 要 求 ; 

(1) 系统 的 每 个 特性 应 至 少 被 一 个 正常 测试 用 例 和 一 个 被 认可 的 异常 测试 用 例 所 

(2) 测试 用 例 的 输入 应 至 少 包括 有 效 等 价 类 值 .无 效 等 价 类 值 和 边界 数据 值 ; 

(3) 应 逐 项 测试 系统 / 子 系统 设计 说 明 规定 的 系统 的 功能 、 性 能 等 特性 ; 

(4) 应 测试 软件 配置 项 之 间 及 软件 配置 项 与 硬件 之 间 的 接口 ; 

(5) 应 测试 系统 的 输出 及 其 格式 ; 

(6) 应 测试 运行 条 件 在 边界 状态 和 异常 状态 下 ,或 在 人 为 设 定 的 状态 下 ,系统 的 功能 
和 性 能 ; 
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(7) 应 测试 系统 访问 和 数据 安全 性 ; 

(8) 应 测试 系统 的 全 部 存储 量 、 输 入 /输出 通道 和 处 理 时 间 的 余 量 ; 

(9) 应 按 系 统 或 子 系统 设计 文档 的 要 求 , 对 系统 的 功能 、 性 能 进行 强度 测试 ; 

(10) 应 测试 设计 中 用 于 提高 系统 安全 性 、 可 靠 性 的 结构 、 算 法、 容错 .元 余 、 中 断 处 理 
等 方案 ; 

(11) 对 完整 性 级 别 高 的 系统 ,应 对 其 进行 安全 性 、 可 靠 性 分 析 , 明 确 每 一 个 危险 状态 
和 导致 危险 的 可 能 原因 ,并 对 此 进行 针对 性 的 测试 ; 

(12) 对 有 恢复 或 重 署 功 能 需求 的 系统 ,应 测试 其 恢复 或 重 置 功 能 和 平均 恢复 时 间 ， 
并 且 对 每 一 类 导致 恢复 或 重 置 的 情况 进行 测试 ; 

(13) 对 不 同 的 实际 问题 应 外 加 相应 的 专门 测试 。 

对 具体 的 系统 ,可 根据 软件 测试 合同 (或 项 目 计划 ) 及 系统 的 重要 性 、 完 整 性 级 别 等 要 
求 对 上 述 内 容 进行 裁剪 。 


9.2 系统 测试 的 内 容 


系统 测试 依据 软件 的 质量 特性 进行 ,其 内 容 主要 从 适合 性 、 准 确 性 、 互 操作 性 、 安 全 保 
密 性 .成 熟 性 .容错 性 、 易 恢复 性 、 易 理解 性 、 易 学 性 、 易 操作 性 .吸引 性 .时 间 特 性 ,资源 利 
用 性 、 易 分 析 性 、 易 改变 性 .稳定 性 、 易 测试 性 .适应 性 、 易 安装 性 .共存 性 、 易 替换 性 和 依从 
性 等 方面 (有 选择 的 ) 来 考虑 。 

1) 功能 性 

软件 的 功能 性 包括 适合 性 \ 准 确 性 、 互 操作 性 和 安全 保密 性 等 方面 。 

(1) 适合 性 方面 。 应 测试 系统 / 子 系统 设计 文档 规定 的 系统 的 每 一 项 功能 。 

(2) 准确 性 方面 。 可 对 系统 中 具有 准确 性 要 求 的 功能 和 精度 要 求 的 项 (如 数据 处 理 
精度 .时 间 控 制 精度 .时 间 测 量 精度 ) 进 行 测试 。 

(3) 互 操作 性 方面 。 可 测试 系统 / 子 系统 设计 文档 接口 需求 规格 说 明文 档 和 接口 设 
计 文 档 规定 的 系统 与 外 部 设备 的 接口 与 其 他 系统 的 接口 。 测 试 其 格式 和 内 容 , 包 括 数 据 
交换 的 数据 格式 和 内 容 ; 测 试 接口 之 间 的 协调 性 ;测试 软件 对 系统 每 一 个 真实 接口 的 正确 
性 ;测试 软件 系统 从 接口 接收 和 发 送 数据 的 能 力 , 测 试 数 据 的 约定 .协议 的 一 致 性 ;测试 软 
件 系统 对 外 围 设备 接口 特性 的 适应 性 。 

(4) 安全 保密 性 方面 。 可 测试 系统 及 其 数据 访问 的 可 控制 性 。 

测试 系统 防止 非法 操作 的 模式 ,包括 防止 非 授权 的 创建 、 删 除 或 修改 程序 或 信息 , 必 
要 时 做 强化 异常 操作 的 测试 。 

测试 系统 防止 数据 被 率 误 和 被 破坏 的 能 力 ; 测 试 系统 的 加 密 和 解密 功能 。 

2) 可 靠 性 

(1) 成 熟 性 方面 。 可 基于 系统 运行 剖面 设计 测试 用 例 , 根 据 实际 使 用 的 概率 分 布 随 
机 选择 输入 并 运行 系统 。 测 试 系统 满足 需求 的 程度 并 获取 失效 数据 ,其 中 包括 对 重要 输 
入 变量 值 的 覆盖 、 对 相关 输入 变量 可 能 组 合 的 覆盖 、 对 设计 输入 空间 与 实际 输入 空间 之 间 
区 域 的 覆盖 、 对 各 种 使 用 功能 的 覆盖 、 对 使 用 环境 的 覆盖 。 应 在 有 代表 性 的 使 用 环境 中 以 
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及 可 能 影响 系统 运行 方式 的 环境 中 运行 软件 ,验证 系统 的 可 靠 性 需求 是 否 正 确实 现 。 对 
一 些 特殊 的 系统 ,如 容错 软件 .实时 嵌入 式 软件 等 ,由 于 在 一 般 使 用 环境 下 很 难 在 软件 中 
植 人 差错 ,应 考虑 多 种 测试 环境 。 

测试 系统 的 平均 无 故障 时 间 ; 通 过 检测 到 的 失效 数 和 故障 数 ,对 系统 的 可 靠 性 进行 
预测 。 

(2) 容错 性 方面 。 可 考虑 测试 : 

Q@ 系统 对 中 断 发 生 的 反应 ; 

@ 系统 在 边界 条 件 下 的 反应 ; 

@ 系统 的 功能 ,性 能 的 降级 情况 ; 

@ 系统 的 各 种 误 操作 模式 ; 

@ 系统 的 各 种 故障 模式 (如 数据 超 范围 死 锁 ); 

@ 测试 在 多 机 系统 出 现 故障 需要 切换 时 系统 的 功能 和 性 能 的 连续 平稳 性 。 

(3) 易 恢 复 性 方面 。 可 测试 : 

@ 具有 自动 修复 功能 的 系统 的 自动 修复 的 时 间 ; 

@ 系统 在 特定 的 时 间 范 围 内 的 平均 宕 机 (死机 ) 时 间 ; 

@ 系统 在 特定 的 时 间 范围 内 的 平均 恢复 时 间 ; 

@ 系统 的 可 重启 动 并 继续 提供 服务 的 能 力 ; 

@ 系统 的 还 原 功能 的 还 原 能 力 。 

(4) 易 用 性 。 软 件 的 易 用 性 包括 易 理 解 性 、 易 学 性 、 易 操作 性 和 吸引 性 等 方面 。 

@ 易 理解 性 方面 。 从 易 理 解 性 方面 考虑 ,可 测试 : 

。 系统 的 各 项 功能 ,确认 它们 是 否 容易 被 识别 和 被 理解 ; 

。 要 求 具 有 演示 能 力 的 功能 确认 演示 是 否 容 易 被 访问 、 演 示 是 否 充 分 和 有 效 ; 

。 界面 的 输入 和 输出 ,确认 输入 和 输出 的 格式 和 含义 是 否 容易 被 理解 。 

@ 易学 性 方面 。 可 测试 系统 的 在 线 帮 助 、 确 认 在 线 帮助 是 否 容易 定位 ,是 否 有 效 ; 还 
可 对 照 用 户 手册 或 操作 手册 执行 系统 ,测试 用 户 文档 的 有 效 性 。 

@ 易 操 作 性 方面 。 可 测试 : 
输入 数据 ,确认 系统 是 否 对 输入 数据 进行 有 效 性 检查 ; 
要 求 具有 中 断 执行 的 功能 ,确认 它们 能 否 在 动作 完成 之 前 被 取消 ; 
要 求 具有 还 原 能 力 ( 数 据 库 事务 回 滨 能 力 ) ,确认 动作 能 否 在 完成 之 后 被 撤销 ; 
包含 参数 设置 的 功能 ,确认 参数 是 否 易于 选择 .是否 有 缺 省 值 ; 
要 求 具 有 解释 的 消息 ,确认 是 否 明确 ; 
要 求 具 有 界面 提示 能 力 的 界面 元 素 , 确 认 是 否 有 效 ; 
要 求 具有 容错 能 力 的 功能 和 操作 确认 系统 能 否 提示 出 错 的 风险 、 能 否 容易 纠正 错 
误 的 输入 、 能 否 从 差错 中 恢复 ; 

。 要 求 具有 定制 能 力 的 功能 和 操作 ,确认 定制 能 力 的 有 效 性 ; 

。 要 求 其 有 运行 状态 监控 能 力 的 功能 ,确认 其 有 效 性 。 

以 正确 操作 、 误 操作 模式 、 非 常规 操作 模式 和 快速 操作 为 框架 设计 测试 用 例 , 误 操作 
模式 有 错误 的 数据 类 型 作 参 数 、 错 误 的 输入 数据 序列 、 错 误 的 操作 序列 等 。 如 有 用 户 手册 
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或 操作 手册 ,可 对 照 手册 逐条 进行 测试 。 

@ 吸引 性 方面 。 测 试 系统 的 人 机 交互 界面 能 否定 制 。 

(5) 效率 。 

QO@ 时 间 特 性 方面 。 可 考虑 测试 系统 的 响应 时 间 .平均 响应 时 间 、 响 应 极限 时 间 、 系 统 
的 吞吐 量 ,平均 吞吐 量 ,极限 吞吐 量 、 系 统 的 周转 时 间 ,平均 周转 时 间 周转 时 间 极 限 。 

响应 时 间 指 系统 为 完成 一 项 规定 任务 所 需 的 时 间 ; 平 均 响应 时 间 指 系统 执行 若干 并 
行 任务 所 需 的 平均 时 间 ; 响 应 极限 时 间 指 在 最 大 负载 条 件 下 ,系统 完成 某 项 任务 需要 时 间 
的 极限 ;吞吐 量 指 在 给 定 的 时 间 周 期 内 系统 能 成 功 完成 的 任务 数量 ;平均 吞吐 量 指 在 一 个 
单位 时 间 内 系统 能 处 理 并 发 任务 的 平均 数 ; 极 限 吞吐 量 指 在 最 大 负载 条 件 下 ,在 给 定 的 时 
间 周 期 内 ,系统 能 处 理 的 最 多 并 发 任务 数 ;周转 时 间 指 从 发 出 一 条 指令 开始 到 一 组 相关 的 
任务 完成 的 时 间 ;平均 周转 时 间 指 在 一 个 特定 的 负载 条 件 下 ,对 一 些 并 发 任务 从 发 出 请 求 
到 任务 完成 所 需要 的 平均 时 间 ; 周 转 时 间 极 限 指 在 最 大 负载 条 件 下 ,系统 完成 一 项 任务 所 
需要 时 间 的 极限 。 

在 测试 时 ,应 标识 和 定义 适合 于 软件 应 用 的 任务 ,并 对 多 项 任务 进行 测试 ,而 不 是 仅 
测 一 项 任务 。 软 件 应 用 任务 的 例子 ,如 在 通信 应 用 中 的 切换 .数据 包 发 送 ,在 控制 应 用 中 
的 事件 控制 ,在 公共 用 户 应 用 中 由 用 户 调用 的 功能 产生 的 一 个 数据 的 输出 等 。 

@ 资源 利用 性 方面 。 可 考虑 测试 系统 的 输入 /输出 设备 ,内 存 和 传输 资源 的 利用 
情况 。 


执行 大 量 的 并 发 任务 ,测试 输入 /输出 设备 的 利用 时 间 ; 
在 使 输入 /输出 负载 达到 最 大 的 系统 条 件 下 ,运行 系统 测试 输入 /输出 负载 极限 ; 
并 发 执行 大 量 的 任务 ,测试 用 户 等 待 输入 /输出 设备 操作 完成 需要 的 时 间 ,建议 调 
查 几 次 测试 与 运行 实例 中 的 最 大 时 间 与 时 间 分 布 ; 
在 规定 的 负载 下 和 在 规定 的 时 间 范 围 内 运行 系统 ,测试 内 存 的 利用 情况 ; 
在 最 大 负载 下 运行 系统 ,测试 内 存 的 利用 情况 ; 
并 发 执行 规定 的 数 个 任务 ,测试 系统 的 传输 能 力 ; 
在 系统 负载 最 大 的 条 件 下 和 在 规定 的 时 间 周 期 内 ,测试 传输 资源 的 利用 情况 ; 
。 在 系统 传输 负载 最 大 的 条 件 下 ,测试 不 同 介质 同步 完成 其 任务 的 时 间 周 期 。 
(6) 维护 性 。 
J@ 易 分 析 性 方面 。 可 设计 各 种 情况 的 测试 用 例 运行 系统 ,并 监测 系统 运行 状态 数 
据 , 检 查 这 些 数 据 是 否 容 易 获 得 、 内 容 是 否 充分 。 如 果 软 件 具 有 诊断 功能 ,应 测试 该 功能 。 
@) 易 改变 性 万 面 。 可 测试 能 否 通过 参数 来 改变 系统 。 
G) 易 测 试 性 方面 。 可 测试 软件 内 置 的 测试 功能 ,确认 它们 是 否 完整 和 有 效 。 
(7) 可 移植 性 。 
Q@ 适应 性 方面 。 可 测试 : 
。 软件 对 诸如 数据 文件 数据 块 或 数据 库 等 数据 结构 的 适应 能 力 ; 
。 软件 对 硬件 设备 和 网 络 设施 等 硬件 环境 的 适应 能 力 ; 
。 软件 对 系统 软件 或 并 行 的 应 用 软件 等 软件 环境 的 适应 能 力 ; 
。 软件 是 否 易于 移植 。 
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回 易 安装 性 方面 。 可 测试 软件 安装 的 工作 量 、 安 装 的 可 定制 性 、 安 装 设计 的 完备 性 、 
安装 操作 的 简易 性 、 是 否 容易 重新 安装 。 

安装 设计 的 完备 性 可 分 为 3 级 : 

。 最 好 : 设计 了 安装 程序 并 编写 了 安装 指南 文档 ; 

。 好: 仅 编写 了 安装 指南 文档 ; 

。 差 : 无 安装 程序 和 安装 指南 文档 。 

安装 操作 的 简易 性 可 分 为 4 级 : 

。 非常 容易 : 只 需 启 动 安 装 功能 并 观察 安装 过 程 ; 

。 容易 : 只 需 回答 安装 功能 中 提出 的 问题 ; 

。 不 容易 : 需要 从 表 或 填充 框 中 看 参数 ; 

。 复杂 : 需要 从 文件 中 寻找 参数 ,改变 或 写 它们 。 

@ 共存 性 方面 。 可 测试 软件 与 其 他 软件 共同 运行 的 情况 。 

@ 易 蔡 换 性 方面 。 当 蔡 换 整个 不 同 的 软件 系统 和 用 同一 软件 系列 的 高 版 本 替换 低 
版 本 时 ,在 易 蔡 换 性 方面 ,可 考虑 测试 : 

。 软件 能 否 继 续 使 用 被 其 替代 的 软件 使 用 过 的 数据 ; 

。 软件 是 否 具有 被 其 蔡 代 的 软件 中 的 类 似 功 能 。 

(8) 依从 性 方面 。 当 软件 在 功能 性 .可靠 性 、. 易 用 性 、 效 率 、 维 护 性 和 可 移植 性 方面 遵 
循 了 相关 的 标准 、 约 定 、 风 格 指南 或 法 规 时 ,应 酌情 进行 测试 。 


9.3 系统 测试 过 程 
9.3.1 测试 策划 


测试 分 析 人 员 应 根据 测试 合同 (或 项 目 计 划 )、 被 测 软件 的 开发 合同 或 系统 子 系统 设 
计 文 档 分 析 被 测 系统 并 确定 以 下 内 容 : 

(1) 确定 测试 充分 性 要 求 。 确 定 测试 应 覆盖 的 范围 及 每 一 范围 所 要 求 的 获 盖 程度 。 

(2) 确定 测试 终止 的 要 求 。 指 定 测试 过 程 正常 终止 的 条 件 ( 如 测试 充分 性 是 否 达 到 
要 求 ) 并 确定 导致 测试 过 程 异常 终止 的 可 能 情况 (如 接口 错误 )。 

(3) 确定 用 于 测试 的 资源 要 求 , 包 括 软件 (如 操作 系统 、 编 译 软 件 、 测 试 结果 获取 和 处 
理 软 件 、 测 试 驱动 软件 等 )、 硬 件 (如 计算 机 、 设 备 接口 等 )、 人 员 数 量 、 人 员 技 能 等 。 

(4) 确定 需要 测试 的 软件 特性 。 根 据 软 件 开 发 合同 或 系统 / 子 系统 设计 文档 的 描述 ， 
确定 系统 的 功能 、 性 能 、 状 态 、 接 口 数据 结构 、 设 计 约 束 等 内 容 和 要 求 ,对 其 标识 。 若 需 
要 ,将 其 分 类 ,并 从 中 确定 需 测试 的 软件 特性 。 

(5) 确定 测试 需要 的 技术 和 方法 ,如 测试 数据 生成 和 验证 技术 、 测 试 数据 输入 技术 、 
测试 结果 获取 技术 、 是 否 使 用 标准 测试 集 等 。 

(6) 根据 测试 合同 (或 项 目 计划 ) 的 要 求 和 被 测 软 件 的 特点 ,确定 测试 准 出 条 件 。 

(7) 确定 由 资源 和 被 测 系 统 决定 的 系统 测试 活动 的 进度 。 

(8) 对 测试 工作 进行 风险 分 析 与 评估 ,并 制定 应 对 措施 。 
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根据 上 述 分 析 结 果 ,按照 测试 规范 的 要 求 编 写 系统 测试 计划 。 

应 对 系统 测试 计划 进行 评审 。 评 审 测试 的 范围 和 内 容 资源、 进度 各 方 责任 等 是 否 
明确 ,测试 方法 是 否 合理 `\ 有 效 和 可 行 ,风险 的 分 析 、 评 估 与 对 策 是 否 准确 可 行 ,测试 文档 
是 否 符合 规范 ,测试 活动 是 否 独立 。 当 测试 活动 由 被 测 软件 的 供 方 实施 时 ,系统 测试 计划 
的 评审 应 纳入 软件 开发 过 程 的 阶段 评审 ; 当 测试 活动 由 独立 的 测试 机 构 实施 时 ,系统 测试 
计划 应 通过 软件 的 需 方 、 供 方 和 有 关 专 家 参加 的 评审 ,通过 评审 后 进入 下 一 步 工作 。 


9.3.2 测试 设计 


测试 设计 工作 由 测试 设计 人 员 和 测试 程序 员 完成 ,一 般 根据 系统 测试 计划 完成 以 下 
工作 。 

(1) 设计 测试 用 例 将 需 测 试 的 软件 特性 分 解 , 针 对 分 解 后 的 每 种 情况 设计 测试 用 例 。 

(2) 获取 测试 数据 ,包括 获取 现 有 的 测试 数据 和 生成 新 的 数据 ,并 按照 要 求 验证 所 有 
数据 。 

(3) 确定 测试 顺序 ,可 从 资源 约束 、 风 险 以 及 测试 用 例 失效 造成 的 影响 或 后 果 几 个 方 
面 考虑 。 

(4) 获取 测试 资源 ,支持 测试 的 软件 需要 从 现 有 的 工具 中 选 定 或 者 开发 。 

(5) 编写 测试 程序 ,包括 开发 测试 支持 工具 。 

(6) 建立 和 校准 测试 环境 。 

(7) 按照 测试 规范 的 要 求 编写 系统 测试 说 明 。 

应 对 系统 测试 说 明 进 行 评 审 。 评 审 测试 用 例 是 否 正确 .可 行 和 充分 ,测试 环境 是 否 正 
确 、 合 理 , 测 试 文档 是 否 符合 规范 。 当 测试 活动 由 被 测 软件 的 供 方 实施 时 ,评审 应 由 软件 
的 供 方 组 织 ,软件 的 需 方 和 有 关 专 家 参加 ; 当 测试 活动 由 独立 的 测试 机 构 实 施 时 ,评审 应 
由 测试 机 构 组 织 , 软 件 的 需 方 、 供 方 和 有 关 专 家 参加 。 系 统 测试 说 明 通 过 评审 后 进入 下 一 
步 工作 。 


9.3.3 测试 执行 


执行 测试 的 工作 由 测试 员 和 测试 分 析 员 完 

测试 员 的 主要 工作 是 执行 系统 测试 计划 和 系统 测试 说 明 中 规定 的 测试 项 目 和 内 容 。 
在 执行 过 程 中 ,测试 员 应 认真 观察 并 记录 测试 过 程 ,测试 结 果 和 发 现 的 差错 。 

测试 分 析 员 的 工作 主要 有 如 下 两 方面 : 

(1) 根据 每 个 测试 用 例 的 期 望 测试 结果 、 实 际 测试 结果 和 评价 准则 判定 该 测试 用 例 
是 否 通 过 。 如 果 不 通过 ,测试 分 析 员 应 认真 分 析 情 况 , 并 根据 情况 采取 相应 措施 。 

(2) 所 有 测试 用 例 执 行 完 毕 , 测 试 分 析 员 要 根据 测试 的 充分 性 要 求 和 失效 记录 ,确定 
测试 工作 是 否 充分 ,是 否 需 要 增加 新 的 测试 。 当 测试 过 程 正常 终止 时 ,如 果 发 现 测试 工作 
不 足 , 应 对 软件 系统 进行 补充 测试 ,直到 测试 达到 预期 要 求 , 并 将 附加 的 内 容 记 录 在 系统 
测试 报告 中 。 当 测试 过 程 异常 终止 时 ,应 记录 导致 终止 的 条 件 、 未 完成 的 测试 和 未 被 修正 
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的 差错 。 
9.3.4 测试 总 结 


测试 分 析 员 应 根据 软件 开发 合同 或 系统 / 子 系统 设计 文档 ,系统 测试 计划 、 系 统 测 试 
说 明 测试 记录 和 软件 问题 报告 单 等 ,分 析 和 评价 测试 工作 ,并 将 以 下 内 容 记录 在 系统 测 
试 报告 中 。 

(1) 总 结 系统 测试 计划 和 系统 测试 说 明 的 变化 情况 及 其 原因 ; 

(2) 对 测试 异常 终止 情况 ,确定 未 能 被 测试 活动 充分 覆盖 的 范围 

(3) 确定 未 能 解决 的 软件 测试 事件 以 及 不 能 解决 的 理由 ; 

(4) 总 结 测试 所 反映 的 软件 系统 与 软件 开发 合同 或 系统 / 子 系统 设计 文档 之 间 的 
差异 ; 

(5) 将 测试 结果 连同 所 发 现 的 差错 情况 同 软件 开发 合同 或 系统 / 子 系统 设计 文档 对 
照 , 评 价 软件 系统 的 设计 与 实现 ,提出 软件 改进 建议 ; 

(6) 按照 测试 规范 的 要 求 编写 系统 测试 报告 ,该 报告 应 包括 测试 结果 分 析 、 对 软件 系 
统 的 评价 和 建议 ; 

(7) 根据 测试 记录 和 软件 问题 报告 单 编写 测试 问题 报告 。 

应 对 系统 测试 的 执行 活动 ,测试 报告 .测试 记录 、 测 试问 题 报告 进行 评审 。 评 审 测试 
执行 活动 的 有 效 性 、 测 试 结果 的 正确 性 和 合理 性 评审 是 否 达到 了 测试 目的 、 测 试 文档 是 否 
符合 要 求 。 当 测试 活动 由 被 测 软 件 的 供 方 实施 时 ,评审 应 由 软件 的 供 方 组 织 , 软 件 的 需 方 
和 有 关 专家 参加 ; 当 测 试 活动 由 独立 测试 机 构 实施 时 ,评审 应 由 该 机 构 组 织 , 软 件 的 需 方 、 
供 方 和 有 关 专 家 参加 。 


9.4 功能 测试 


功能 测试 可 以 发 生 在 单元 测试 中 ,也 可 以 在 集成 测试 ,系统 测试 中 进行 ,应 该 在 各 个 
层次 保证 软件 功能 执行 的 正确 性 。 

在 单元 测试 中 ,功能 测试 的 目的 是 保证 所 测试 的 每 个 独立 模块 的 功能 是 正确 的 ,主要 
是 从 输入 条 件 和 输出 结果 来 判断 是 否 满足 程序 的 设计 要 求 。 

在 系统 集成 过 程 及 其 之 后 所 进行 的 系统 功能 测试 中 ,不 仅 要 考虑 模块 之 间 的 相互 作 
用 ,而 且 要 考虑 系统 的 应 用 环境 ,其 衡量 标准 是 实现 产品 规格 说 明 书 上 所 要 求 的 功能 , 特 
别 需 要 模拟 用 户 完成 从 头 到 尾 ( 端 到 端 ) 的 测试 ,确保 系统 可 以 实现 设计 功能 ,满足 用 户 的 
真正 需求 。 

黑 盒 测 试 常 被 称 为 功能 测试 ,但 事实 上 ,在 功能 测试 的 时 候 也 可 以 采用 白 盒 方法 或 灰 
盒 方法 ,如 查看 源 代 码 .变量 在 数据 库 中 的 值 等 ,但 多 数 情况 下 是 采用 黑 盒 测试 方法 。 常 
用 的 测试 方法 如 等 价 类 划分 法 ,边界 值 划分 法 、 错 误 推测 法 和 因果 图 法 等 。 

灰 盒 测试 : 是 介 于 白 盒 测 试 与 黑 盒 测试 之 间 的 软件 测试 方法 。 可 以 这 样 理解 , 灰 盒 
测试 关注 输出 对 于 输入 的 正确 性 ,同时 也 关注 内 部 表现 ,但 这 种 关注 不 像 白 盒 那样 详细 、 
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完整 ,只 是 通过 一 些 表征 性 的 现象 事件、 标志 来 判断 内 部 的 运行 状态 ,有 时 候 输 出 是 正确 
的 ,但 内 部 其 实 已 经 错误 了 ,这 种 情况 非常 多 ,如 果 每 次 都 通过 白 盒 测试 来 操作 ,效率 会 很 
低 ,因此 需要 采取 这 样 的 一 种 灰 盒 的 方法 。 

功能 测试 主要 是 根据 产品 规格 说 明 书 ,来 检验 被 测试 的 系统 是 否 满足 各 方面 功能 的 
使 用 要 求 。 针 对 不 同 的 应 用 系统 ,功能 测试 的 测试 内 容 的 差异 很 大 ,但 一 般 都 可 以 归 为 界 
面 , 数 据 、 操 作 、 逻 辑 、 接 口 等 几 个 方面 ,例如 : 

。 程序 安装 、 启 动 正常 ,有 相应 的 提示 框 、 错 误 提示 等 。 

。 每 项 功能 符合 实际 要 求 。 
系统 的 界面 清晰 ,美观 。 
。 菜单. 按钮 操作 正常 .灵活 ,能 处 理 一 些 异常 操作 。 
。 能 接受 正确 的 数据 输入 ,对 异常 数据 的 输入 可 以 进行 提示 、 容 错 处 理 等 。 数 据 的 
输出 结果 准确 ,格式 清晰 ,可 以 保存 和 读 取 。 
功能 逻辑 清楚 ,符合 使 用 者 习惯 。 
系统 的 各 种 状态 按照 业务 流程 而 变化 ,并 保持 稳定 。 
支持 各 种 应 用 的 环境 。 
能 配合 多 种 硬件 周边 设备 。 
软件 升级 后 ,能 继续 支持 旧版 本 的 数据 。 
与 外 部 应 用 系统 的 接口 有 效 。 


9.5 性 能 测试 


对 于 实时 和 嵌入 式 系 统 , 提 供 所 需 功能 但 不 符合 性 能 需求 的 软件 是 不 能 被 接受 的 。 
例如 某 个 网 站 可 以 被 访问 ,而 且 可 以 提供 预先 设 定 的 功能 ,但 每 打开 一 个 页 面 都 需要 1 一 
2 分钟 ,用 户 将 不 能 忍受 其 结果 ,也 就 没有 用 户 愿意 使 用 该 网 站 所 提供 的 服务 。 虽 然 从 单 
元 测试 起 ,每 一 测试 步 又 都 包含 性 能 测试 ,但 只 有 当 系统 真正 集成 之 后 ,在 真实 环境 中 才 
能 全 面 、 可 靠 地 测试 系统 性 能 , 即 系统 性 能 测试 。 性 能 测试 可 以 确定 系统 运行 时 的 性 能 表 
现 ,如 得 到 运行 速度 、 响 应 时 间 、 占 有 系统 资源 等 方面 的 系统 数据 。 

性 能 测试 经 常 与 压力 测试 一 起 进行 , 且 常 需要 硬件 和 软件 工具 。 也 就 是 说 ,以 严格 的 
方式 测量 资源 (例如 处 理 器 周期 ) 的 利用 往往 是 必要 的 。 当 有 运行 间歇 或 事件 (例如 中 断 ) 
发 生 时 ,外 部 工具 可 以 监测 到 ,并 可 定期 监测 采样 机 的 状态 。 通 过 检测 系统 ,测试 人 员 可 
以 发 现 导 致 效率 降低 和 系统 故障 的 情形 。 


9.5.1 系统 负载 


通常 ,系统 负载 可 以 看 做 是 “并 发 用 户 数量 十 思考 时 间 十 每 次 请 求 发 送 的 数据 量 十 负 
。 在 线 用 户 : 通过 浏览 器 访问 登录 Web 应 用 系统 ,并 且 没有 退出 该 系统 的 用 户 。 通 
常 一 个 Web 应 用 服务 器 的 在 线 用 户 对 应 Web 应 用 服务 器 的 一 个 Session( 会 议 ) 。 


196| 


六 站 系统 测试 技术 


虚拟 用 户 : 模拟 浏览 器 向 Web 服务 器 发 送 请 求 并 接收 响应 的 一 个 进程 或 线程 。 
并 发 用 户 : 严格 意义 上 说 ,这 些 用 户 在 同一 时 刻 做 同一 件 事情 或 同样 的 操作 , 比 
如 在 同一 时 刻 登 录 系 统 、 提 交 订 单 等 。 也 可 以 定义 为 : 并 发 用 户 同时 在 线 并 操作 
系统 ,但 可 以 是 不 相同 的 操作 。 后 一 种 并 发 更 接近 于 用 户 的 实际 使 用 情况 。 在 性 
能 测试 中 ,一 般 采 用 严格 意义 上 的 并 发 用 户 , 因 为 同时 模拟 多 个 用 户 运 行 一 套 脚 
本 更 容易 实现 。 如 果 从 虚拟 用 户 或 逻辑 上 理解 ,并 发 用 户 可 以 理解 为 Web 服务 
器 在 一 段 时 间 内 为 处 理 浏览 器 请 求 而 建立 的 HTTP 连接 数 或 生成 的 处 理 线 
程 数 。 

并 发 用 户 数量 : 可 以 近似 于 同时 在 线 的 用 户 数量 ,但 不 一 定 等 于 在 线 用 户 的 数 
量 , 因 为 有 些 在 线 用 户 不 进行 操作 ,或 前 后 操作 之 间 的 间隔 时 间 很 长 。 

思考 时 间 : 浏览 器 在 收 到 响应 后 到 提交 下 一 个 请 求 之 间 的 间隔 时 间 。 通 过 思考 
时 间 可 以 模拟 实际 用 户 的 操作 ,思考 时 间 越 短 , 服 务 器 就 能 承受 更 大 的 负载 。 当 
所 有 在 线 用 户 发 送 HTTP 请 求 的 思考 时 间 为 零 时 , Web 服务 器 的 并 发 用 户 数 等 
于 在 线 用 户 数 。 

负载 模式 : 就 是 加 载 的 方式 ,例如 是 一 次 建立 200 个 并 发 连接 ,还 是 每 秒 10 个 连 
接 逐 渐 增加 连接 数 ,直至 200 个 。 还 有 其 他 加 载 方式 ,如 随机 加 载 、 峰 谷 交替 加 
载 等 。 


9.5.2 系统 性 能 指标 


系统 的 性 能 指标 包括 两 方面 的 内 容 : 系统 资源 (CPU 、 内 存 等 ) 的 使 用 率 和 系统 行为 
表现 。 资 源 使 用 率 越 低 ,一 般 来 说 系统 会 有 更 好 的 性 能 表现 ,反之 ,系统 资源 使 用 率 很 高 
甚至 耗 光 , 系 统 的 性 能 肯定 不 会 好 。 资 源 利用 率 是 分 析 系 统 性 能 指标 进而 改善 性 能 的 主 
要 依据 。 
系统 行为 的 性 能 指标 很 多 ,常见 的 有 : 
。 请 求 响 应 时 间 : 客户 端 浏 览 器 向 Web 服务 器 提交 一 个 请 求 到 收 到 响应 之 间 的 间 
隔 时 间 。 有 些 测试 工具 将 请 求 响应 时 间 表 示 为 TLB(Time to Last Byte), 即 : 从 
发 起 一 个 请 求 开 始 到 客户 端 接收 到 最 后 一 个 字 节 所 耗费 的 时 间 。 
。 事务 响应 时 间 : 事务 可 能 由 一 系列 请 求 组 成 ,事务 的 响应 时 间 就 是 这 些 请 求 完成 
处 理 所 花 费 的 时 间 。 它 是 针对 用 户 的 业务 而 设置 的 ,容易 被 用 户 理解 。 
。 数据 吞吐 量 : 单位 时 间 内 客户 端 和 服务 器 之 间 网 络 上 传输 的 数据 量 , 对 于 Web 服 
务 器 ,数据 吞吐 量 可 以 理解 为 单位 时 间 内 Web 服务 器 成 功 处 理 的 HTTP 页 面 或 
HTTP 请 求 数 量 。 


9.5.3 性 能 测试 的 基本 过 程 


执行 性 能 测试 的 基本 过 程 : 
(1) 确定 性 能 测试 需求 ,包括 确定 哪些 性 能 指标 要 度量 ,以 及 系统 会 承受 哪些 负载 。 
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其 中 还 要 确定 关键 业务 的 操作 ,也 就 是 针对 哪些 关键 操作 来 执行 性 能 测试 。 

(2) 根据 测试 需求 ,选择 测试 工具 和 开发 相应 的 测试 脚本 。 一 般 针 对 选 定 的 关键 业 
务 操作 来 开发 相应 的 自动 化 测试 脚本 ,并 进行 测试 脚本 的 数据 关联 (如 建立 客户 端 请 求 和 
系统 响应 指标 之 间 的 关联 ) 和 参数 化 (把 脚本 中 的 某 些 请 求 数 据 蔡 换 成 变量 ) 。 

(3) 建立 性 能 测试 负载 模型 。 就 是 确定 并 发 虚拟 用 户 的 数量 、 每 次 请 求 的 数据 量 、 思 
考 时 间 、 加 载 方式 和 持续 加 载 的 时 间 等 。 设 计 负 载 模型 通常 不 会 一 次 设计 到 位 ,是 一 个 不 
断 迁 代 完善 的 过 程 , 即 使 在 执行 过 程 中 ,也 不 是 完全 按照 设计 好 的 测试 用 例 来 执行 ,需要 
根据 需求 的 变化 进行 调整 和 修改 。 

(4) 执行 性 能 测试 。 通 过 多 次 运行 性 能 测试 负载 模型 ,获得 系统 的 性 能 数据 。 一 般 
要 借助 工具 对 系统 资源 进行 监控 和 分 析 , 帮 助 发 现 性 能 瓶颈 ,定位 应 用 代码 中 的 性 能 问 
题 ,切实 解决 系统 的 性 能 问题 或 在 系统 层面 进行 优化 。 

(5) 提交 性 能 测试 报告 。 包 括 性 能 测试 方法 .负载 模 型 和 实际 执行 的 性 能 测试 ,性 能 
测试 结果 及 其 分 析 等 。 


9.6 压力 测试 


压力 测试 (也 称 强度 测试 ,负载 测试 ) 是 模拟 实际 应 用 的 软 、 硬 件 环境 及 用 户 使 用 过 程 
的 系统 负荷 ,长 时 间或 超大 负荷 地 运行 测试 软件 ,来 测试 被 测 系 统 的 性 能 、 可 靠 性 、 稳 定性 
等 ,其 目的 是 使 软件 面 对 非 正常 的 情形 。 在 软件 投入 使 用 前 或 软件 负载 达到 极限 前 ,通过 
执行 可 重复 的 负载 测试 ,了 解 系统 可 靠 性 .性 能 瓶颈 等 ,以 提高 软件 系统 的 可 靠 性 、 稳 定 
性 ,减少 系统 的 宕 机 时 间 和 因此 带 来 的 损失 。 

从 本 质 上 来 说 ,测试 者 想 要 破坏 程序 ,就 会 设计 异常 情况 ,主要 是 指 峰值 (瞬间 使 用 高 
峰 )、 大 量 数据 的 处 理 能 力 \ 长 时 间 运 行 等 情况 。 压 力 测试 总 是 迫使 系统 在 异常 的 资源 配 
置 下 运行 。 例 如 : 运行 需要 最 大 存储 空间 (或 其 他 资源 ) 的 测试 用 例 ;运行 可 能 导致 虚 存 
操作 系统 崩溃 或 大 量 数据 对 磁盘 进行 存 取 操作 的 测试 用 例 等 。 

压力 测试 的 一 个 变 体 称 为 敏感 性 测试 。 在 一 些 情况 下 (最 常见 的 是 在 数学 算法 中 )， 
包含 在 有 效 数据 界限 之 内 的 一 小 部 分 数据 可 能 会 引起 极端 处 理 情况 ,甚至 是 错误 处 理 或 
性 能 的 急剧 下 降 。 敏 感性 测试 试图 在 有 效 输入 类 中 发 现 可 能 会 引发 系统 不 稳定 或 者 错误 
处 理 的 数据 组 合 。 


9.6.1 测试 压力 估算 


压力 测试 是 一 种 要 求 以 非 正常 的 数量 、 频 率 或 容量 的 方式 执行 系统 的 测试 。 例 如 : 
中 当 平 均 每 秒 出 现 1 一 2 次 中 断 的 情形 下 ,可 以 设计 每 秒 产生 10 次 中 断 的 测试 用 例 ; 
@ 将 输入 数据 的 量 提高 一 个 数量 级 以 确定 输入 功能 将 如 何 反应 ; @@ 执 行 需要 最 大 内 存 或 
其 他 资源 的 测试 用 例 ; @ 设 计 可 能 在 实际 的 运行 系统 中 产生 惨败 的 测试 用 例 ; @ 创 建 可 
能 会 过 多 查找 磁盘 驻 留 数据 的 测试 用 例 。 从 本 质 上 来 说 ,压力 测试 就 是 试图 破坏 程序 。 

根据 产品 说 明 书 的 设计 要 求 或 以 往 版 本 的 实际 和 运行 经 验 对 测试 压力 进行 估算 ,给 出 
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合理 的 估算 结果 。 例 如 单 台 服 务 器 实际 使 用 时 一 般 只 有 100 个 并 发 用 户 , 但 在 某 一 时 间 
段 的 用 户 峰值 可 达到 500 个 。 那 么 事先 预测 要 求 的 压力 值 为 500 个 用 户 的 1.5 一 2 倍 , 而 
且 要 考虑 到 每 个 用 户 的 实际 操作 所 产生 的 事务 处 理 和 数据 量 。 如 果 产 品 说 明 书 已 说 明 最 
大 设计 容量 , 则 最 大 设计 容量 为 最 大 压力 值 。 


9.6.2 测试 环境 准备 


测试 环境 准备 包括 硬件 环境 (服务 器 、 客 户 机 等 )、 网 络 环境 (网 络 通信 协议 ,带宽 等 )、 
测试 程序 (能 正确 模拟 客户 端的 操作 ) 数据 准备 等 。 

分 析 压 力 测试 中 系统 容易 出 现 瓶 颈 的 地 方 ,从 而 有 目的 地 调整 测试 策略 或 测试 环境 ， 
使 压力 测试 结果 真实 地 反映 出 软件 的 性 能 。 例 如 ,服务 器 的 硬件 限制 ,数据库 的 访问 性 能 
设置 等 常常 会 成 为 制约 软件 性 能 的 重要 因素 ,但 这 些 因素 显然 不 是 用 户 最 关心 的 ,在 测试 
之 前 就 要 通过 一 些 设置 把 这 些 因 素 的 影响 调 至 最 低 。 

1) 压力 稳定 性 测试 

在 选 定 的 压力 值 下 ,持续 运行 24 小 时 以 上 进行 稳定 性 测试 。 客 户 端 通常 由 测试 工具 
模拟 真实 用 户 不 停 地 进行 各 种 操作 。 监 视 服务 器 和 真实 客户 端的 必要 性 能 指标 。 通 过 压 
力 测 试 的 标准 是 各 项 性 能 指标 在 指定 范围 内 ,无 内 存 泄漏 .无 系统 崩溃 .无 功能 性 故障 等 。 

2) 破坏 性 加 压 测 试 

在 压力 稳定 性 测试 中 可 能 会 出 现 一些 问 题 , 如 系统 性 能 明显 降低 ,但 仅 从 以 上 的 测试 
中 很 难 暴露 出 其 真实 的 原因 。 通 过 不 断 加 压 破坏 性 的 手段 ,往往 能 快速 造成 系统 的 崩溃 
或 让 问题 明显 地 暴露 出 来 。 

。 从 某 个 时 间 开 始 服务 器 拒绝 请 求 ,客户 端 上 显示 的 全 是 错误 ; 

。 勉强 测试 完成 ,但 网 络 堵塞 或 测试 结果 显示 时 间 非 常 长 ; 

。 服务 器 宕 机 。 


9.6.3 问题 的 分 析 


压力 测试 通常 采用 黑 盒 测试 方法 ,测试 人 员 很 难 对 出 现 的 问题 进行 准确 的 定位 。 报 
告 中 只 有 现象 会 造成 调试 修改 的 困难 ,而 开发 人 员 又 没有 相应 的 环境 和 时 间 去 重 现 问题 ， 
所 以 适当 的 分 析 和 详细 记录 是 十 分 重要 的 。 

(1) 查看 服务 器 上 的 进程 及 相应 的 日 志文 件 可 能 立刻 找到 问题 的 关键 (如 某 个 进程 
的 崩溃 ) 。 好 的 程序 员 会 给 程序 加 上 保护 、 跟 踪 机 制 及 错误 处 理 机 制 , 备 份 日 志文 件 以 供 
参考 。 

(2) 查看 监视 系统 性 能 的 日 志文 件 , 找 出 问题 出 现 的 关键 时 间 。 此 时 的 在 线 用 户 数 
量 、 系 统 状态 等 也 是 很 有 价值 的 参考 材料 。 

(3) 检查 测试 运行 参数 ,进行 适当 调整 重新 测试 ,看 看 是 否 能 够 再 现 问 题 。 

(4) 对 问题 进行 分 解 ,屏蔽 某 些 因素 或 功能 , 试 着 重 现 问题 。 例 如 客户 端 与 服务 器 有 
3 种 连接 方式 : TCP HTTP、HTTPS, 则 只 保留 HTTP 或 TCP 连接 方式 。 如 问题 仍然 
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存在 ,也 许 是 代理 服务 器 或 网 关 等 造成 的 ,可 采用 把 MS 代理 换 成 SQULID 代理 等 方法 。 
9.6.4 累积 效应 


有 些 测试 人 员 在 压力 测试 中 喜欢 让 整个 系统 重启 (如 服务 器 重启 ) ,以 确保 后 续 的 测 
试 能 在 一 个 “干净 ”的 环境 中 进行 。 这 样 确实 有 利于 问题 的 分 析 , 但 这 不 是 一 个 好 的 习惯 ， 
因为 这 样 往往 会 忽略 掉 累 积 效应 ,使 得 一 些 缺 陷 无 法 被 发 现 。 有 些 问题 的 表现 并 不 明显 ， 
但 日 积 月 累 就 会 造成 严重 问题 ,特别 是 服务 器 端的 压力 测试 。 例 如 某 进 程 每 次 调用 时 申 
请 占用 的 内 存在 运行 完毕 时 并 没有 完全 释放 ,平常 的 测试 中 无 法 发 现 ,但 最 终 可 能 导致 系 
统 的 崩溃 。 


9.7 可 靠 性 测试 


可 靠 性 是 产品 在 规定 的 条 件 下 和 规定 的 时 间 内 完成 规定 功能 的 能 力 , 它 的 概率 度量 
称 为 可 靠 度 。 软 件 可 靠 性 是 软件 系统 的 固有 特性 之 一 , 它 表 明了 一 个 软件 系统 按照 用 户 
的 要 求 和 设计 的 目标 ,执行 其 功能 的 可 靠 程度 。 软 件 可 靠 性 与 软件 缺陷 有 关 , 也 与 系统 输 
人 和 系统 使 用 有 关 。 理 论 上 说 ,可 靠 的 软件 系统 应 该 是 正确 、 完 整 、 一 致 和 健壮 的 。 但 是 
实际 上 任何 软件 都 不 可 能 达到 百分之百 正确 ,而 且 也 无 法 精确 度量 。 一 般 情况 下 ,只 能 通 
过 对 软件 系统 进行 测试 来 度量 其 可 靠 性 。 

对 软件 可 靠 性 可 以 定义 如 下 :“ 软 件 可 靠 性 是 软件 系统 在 规定 的 时 间 内 及 规定 的 环 
境 条 件 下 ,完成 规定 功能 的 能 力 "。 根 据 这 个 定义 ,软件 可 靠 性 主要 包含 以 下 3 个 要 素 : 

(1) 规定 的 时 间 。 软 件 可 靠 性 只 是 体现 在 其 运行 阶段 ,所 以 将 “运行 时 间 ” 作 为 “规定 
的 时 间 ” 的 度量 。“ 运 行 时 间 ” 包 括 软件 系统 运行 后 工作 与 挂 起 (开启 但 空闲 ) 的 累计 时 间 。 
由 于 软件 运行 的 环境 与 程序 路 径 选 取 的 随机 性 ,软件 的 失效 为 随机 事件 ,所 以 运行 时 间 属 
于 随机 变量 。 

(2) 规定 的 环境 条 件 。 指 软件 的 运行 环境 , 它 涉 及 软件 系统 运行 时 所 需 的 各 种 支持 
要 素 ,如 支持 硬件 操作 系统 、 支 持 软 件 、 输 入 数据 格式 和 范围 以 及 操作 规程 等 。 不 同 环境 
条 件 下 软件 的 可 靠 性 是 不 同 的 。 具 体 地 说 ,规定 的 环境 条 件 主 要 描述 软件 系统 运行 时 计 
算 机 的 配置 情况 以 及 对 输入 数据 的 要 求 , 并 假定 其 他 一 切 因 素 都 是 理想 的 。 有 了 明确 规 
定 的 环境 条 件 , 还 可 以 有 效 判断 软件 失效 的 责任 在 用 户 方 还 是 研制 方 。 

(3) 规定 的 功能 。 软 件 可 靠 性 还 与 规定 的 任务 和 功能 有 关 。 由 于 要 完成 的 任务 不 
同 ,软件 的 运行 剖面 会 有 所 区 别 ,调用 的 子 模块 不 同 ( 即 程 序 路 径 选择 不 同 ) ,其 可 靠 性 也 
就 可 能 不 同 。 所 以 ,要 准确 度量 软件 系统 的 可 靠 性 ,必须 首先 明确 它 的 任务 和 功能 。 

软件 可 靠 性 测试 ,也 称 软件 可 靠 性 评估 ,是 指 根据 软件 系统 可 靠 性 结构 (单元 与 系统 
间 可 靠 性 关系 ) 寿命 类 型 和 各 单元 的 可 靠 性 试验 信息 ,利用 概率 统计 方法 ,评估 出 系统 的 
可 靠 性 特征 量 。 
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9.7.1 可 靠 性 测试 方法 


要 进行 软件 可 靠 性 评估 ,就 要 涉及 软件 可 靠 性 模型 , 即 为 预计 或 估算 软件 的 可 靠 性 所 
建立 的 可 靠 性 结构 和 数学 模型 。 建 立 可 靠 性 模型 是 为 了 将 复杂 系统 的 可 靠 性 逐 级 分 解 为 
简单 系统 的 可 靠 性 ,以 便 定量 预计 、 分 配 、 估 算 和 评价 复杂 系统 的 可 靠 性 。 一 般 软 件 可 靠 
性 模型 分 为 两 大 类 , 即 软件 可 靠 性 结构 模型 和 软件 可 靠 性 预计 模型 。 

(1) 软件 可 靠 性 结构 模型 依据 系统 结构 逻辑 关系 ,对 系统 的 可 靠 性 特征 及 其 发 展 变 
化 规律 做 出 可 靠 性 评价 。 此 模型 既 可 用 于 软件 可 靠 性 综合 评价 又 可 用 于 软件 可 靠 性 
分 解 。 

(2) 软件 可 靠 性 预计 模型 则 用 来 描述 软件 失效 与 软件 缺陷 的 关系 ,借助 这 类 模型 ,可 
以 对 软件 的 可 靠 性 特征 做 出 定量 的 预计 或 评估 。 依 据 软件 缺陷 与 运行 剖面 数据 ,利用 统 
计 学 原理 建立 二 者 之 间 的 数学 关系 ,获取 开发 过 程 中 可 靠 性 变化 .软件 在 预定 工作 时 间 的 
可 靠 度 、 软 件 在 任意 时 刻 发 生 失 效 数 平均 值 , 以 及 软件 在 规定 时 间 间 隔 内 发 生 失 效 次 数 的 
平均 值 。 这 里 需要 向 读者 漆 清 两 词 的 区 别 , 即 评估 与 预计 ,评估 是 对 现 有 的 情况 进行 评 
价 , 而 预计 往往 是 依据 现 有 的 情况 及 评估 结果 ,对 未 来 可 能 发 生 的 情况 进行 科学 的 推断 。 
预计 模型 主要 有 以 下 几 类 : 

。 面向 时 间 的 预计 模型 : 以 时 间 为 基准 ,描述 软件 可 靠 性 特征 随时 间 变 化 的 规律 。 

。 面向 输入 数据 的 预计 模型 : 描述 软件 可 靠 性 与 输入 数据 的 联系 ,将 程序 运行 中 的 

失效 次 数 与 成 功 次 数 的 比 作为 软件 可 靠 性 的 度量 。 

。 面向 错误 数 的 预计 模型 : 描述 程序 中 现存 错误 数 的 多 少 ,预示 程序 的 可 靠 性 。 在 

可 靠 性 测试 中 ,可 以 考虑 进行 “强化 输入 ”, 即 输入 比 正常 输入 更 恶劣 (合理 程度 的 
恶劣 ) 的 数据 。 如 果 软 件 在 强化 输入 下 可 靠 ,就 能 说 明 比 正规 输入 下 可 靠 得 多 。 
同时 为 了 获得 更 多 的 可 靠 性 数据 ,应 该 采用 多 台 计算 机 同时 运行 软件 ,以 增加 累 
计 运 行 时 间 。 


9.7.2 可 靠 性 数据 收集 


软件 可 靠 性 数据 是 可 靠 性 评估 的 基础 。 应 该 建立 软件 错误 报告 ,分析 与 纠正 措施 系 
统 。 按 照相 关 标 准 的 要 求 , 制 定 和 实施 软件 错误 报告 及 可 靠 性 数据 收集 ,保存 、 分 析 和 处 
理 的 规程 ,完整 ,准确 地 记录 软件 测试 阶段 的 软件 错误 报告 和 收集 可 靠 性 数据 。 

用 时 间 定 义 的 软件 可 靠 性 数据 可 以 分 为 4 类 : 

。 失效 时 间 数 据 , 记 录 发 生 一 次 失效 所 累积 经 历 的 时 间 。 

。 失效 间隔 时 间 数 据 , 记 录 本 次 失效 与 上 一 次 失效 之 间 的 间隔 时 间 。 

。 分 组 数据 ,记录 某 个 时 间 区 内 发 生 了 多 少 次 失效 。 

。 分 组 时 间 内 的 累积 失效 数 ,记录 某 个 区 间 内 的 累积 失效 数 。 

这 4 类 数据 可 以 互相 转换 。 每 个 测试 记录 必须 包含 充分 的 信息 ,包括 : 

"测试 时 间 。 
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。 含有 测试 用 例 的 测试 计划 或 测试 说 明 。 
。 所 有 与 测试 有 关 的 测试 结果 ,包括 所 有 测试 时 发 生 的 故障 。 
。 参 与 测试 的 个 人 身份 。 


9.7.3 可靠 性 测试 结果 评估 


软件 系统 的 可 靠 性 是 系统 最 重要 的 质量 指标 。ISO9000 国际 质量 标准 (ISO/ 
IEC9126 一 1991) 规 定 , 软 件 产品 的 可 靠 性 含义 是 : 在 规定 的 一 段 时 间 和 条 件 下 ,软件 能 维 
持 其 性 能 水 平 的 能 力 有 关 的 一 组 属性 ,可 用 成 熟 性 、 容 错 性 、 易 恢复 性 3 个 基本 子 特 性 来 
度量 。 成 熟 性 度量 可 以 通过 错误 发 现 率 (Defect Detection Percentage, DDP) 来 表现 。 
DDP 即 测试 发 现 的 错误 数量 /已 知 的 全 部 错误 数量 。 已 知 的 全 部 错误 数量 是 测试 已 发 现 
的 错误 数量 与 可 能 会 发 现 的 错误 数量 之 和 。 在 测试 中 查找 出 来 的 错误 越 多 ,实际 应 用 中 
出 错 的 机 会 就 越 小 ,软件 也 就 越 成 熟 。 

测试 活动 结束 后 必须 编写 软件 可 靠 性 测试 报告 ,对 测试 项 及 测试 结果 在 测试 报告 中 
加 以 总 结 、 归 纳 。 


9.8 容错 性 测试 


容错 性 测试 主要 检查 系统 的 容错 能 力 ,检查 软件 在 异常 条 件 下 自身 是 否 具有 防护 性 
的 措施 或 者 某 种 灾难 性 恢复 的 手段 。 如 当 系统 出 错时 ,能 否 在 指定 时 间 间 隔 内 修正 错误 
并 重新 启动 系统 。 容 错 测试 首先 要 通过 各 种 手段 ,让 软件 强制 性 地 发 生 故 障 , 然 后 验证 系 
统 是 否 能 尽快 恢复 。 容 错 性 测试 包括 两 个 方面 : 

(1) 输入 异常 数据 或 进行 异常 操作 ,以 检验 系统 的 保护 性 。 如 果 系 统 的 容错 性 好 的 
话 ,系统 只 给 出 提示 或 内 部 消化 掉 ,而 不 会 导致 系统 出 错 甚至 崩溃 。 

(2) 灾难 恢复 性 测试 。 通 过 各 种 手段 ,让 软件 强制 性 地 发 生 故 障 ,然后 验证 系统 已 保 
存 的 用 户 数据 是 否 丢失 、 系 统 和 数据 是 否 能 尽快 恢复 。 

对 于 自动 恢复 需 验证 重新 初始 化 ,检查 点 、 数 据 恢复 和 重新 启动 等 机 制 的 正确 性 ;对 
于 人 工 干 预 的 恢复 系统 ,还 需 估 测 平 均 修复 时 间 ,确定 其 是 否 在 可 接受 的 范围 内 。 容 错 性 
好 的 软件 能 确保 系统 不 发 生 无 法 意料 的 事故 。 

从 容错 性 测试 的 概念 可 以 看 出 , 当 软 件 出 现 故障 时 如 何 进行 故障 的 转移 与 恢复 有 用 
的 数据 是 十 分 重要 的 。 


9.8.1 故障 转移 与 数据 恢复 


故障 转移 是 确保 测试 对 象 在 出 现 故障 时 能 成 功 完 成 故障 的 转移 ,并 能 从 导致 意外 数 
据 损失 或 数据 完整 性 破坏 的 各 种 硬件 .软件 和 网 络 故障 中 恢复 。 数 据 恢复 可 确保 : 对 于 
必须 持续 运行 的 系统 ,一 旦 发 生 故 障 ,备用 系统 就 将 不 失 时 机 地 “ 顶 蔡 "发生 故障 的 系统 ， 
避免 丢失 任何 数据 或 事务 。 


过 
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容错 测试 是 一 种 对 抗 性 的 测试 过 程 ,这 种 测试 把 应 用 程序 或 系统 置 于 (模拟 的 ) 异 常 
条 件 下 ,以 产生 故障 。 例 如 设备 输入 /输出 (IO) 故 障 或 无 效 的 数据 库 指针 和 关键 字 等 。 
然后 调用 恢复 进程 并 监测 ,检查 应 用 程序 和 系统 ,核实 系统 和 数据 已 得 到 了 正确 的 恢复 。 
多 数 基于 计算 机 的 系统 必须 从 错误 中 恢复 并 在 一 定 的 时 间 内 重新 运行 。 在 有 些 情 况 下 ， 
系统 必须 是 容错 的 ,也 就 是 说 ,处 理 错误 绝 不 能 使 整个 系统 功能 都 停止 。 而 在 有 些 情 况 
下 ,系统 的 错误 必须 在 特定 的 时 间 内 或 严重 的 经 济 危 害 发 生 之 前 得 到 改正 。 

恢复 测试 是 指 通过 各 种 方式 强制 地 让 系统 发 生 故 障 , 并 验证 其 能 适当 恢复 。 若 恢复 
是 自动 的 (由 系统 自身 完成 ), 则 对 重新 初始 化 、 检 查 点 机 制 、 数 据 恢 复 和 重新 启动 都 要 进 
行 正确 性 评估 。 若 恢复 需要 人 工 干 预 , 则 应 计算 平均 恢复 时 间 (Mean Time To Repair， 
MTTR) 以 确定 其 值 是 否 在 可 接受 的 范围 之 内 。 


9.8.2 测试 目标 


确保 恢复 进程 将 数据 库 、 应 用 程序 和 系统 正确 地 恢复 到 预期 的 已 知 状态 。 测 试 中 将 
包括 以 下 各 种 情况 。 
。 客户 机 断 电 ,服务 器 断 电 ; 
。 通过 网 络 服务 器 产生 的 通信 中 断 或 控制 器 被 中 断 ; 
。 断 电 或 与 控制 器 的 通信 中 断 周期 未 完成 (数据 过 滤 进 程 被 中 断 ,数据 同步 进程 被 
中 断 ); 
。 数据 库 指针 或 关键 字 无 效 , 数 据 库 中 的 数据 元 素 无 效 或 遭 到 破坏 。 


9.8.3 测试 范围 


应 该 使 用 为 功能 和 业务 周期 测试 创建 的 测试 来 创建 一 系列 的 事务 。 一 旦 达到 预期 的 
测试 起 点 ,就 应 该 分 别 执行 或 模拟 以 下 操作 : 

"不 接 打 印 机 ,但 进行 打印 操作 ， 

。 客户 机 断 电 和 服务 器 断 电 ; 

。 网 络 通信 中 断 , 如 断 开 通信 线路 的 连接 或 关闭 网 络 服务 器 或 路 由 器 的 电源 ， 

。 控制 器 被 中 断 、 断 电 或 与 控制 器 的 通信 中 断 , 如 模拟 与 一 个 或 多 个 控制 器 或 设备 

的 通信 ,或 实际 取消 这 种 通信 。 

一 旦 实现 了 上 述 情 况 ( 或 模拟 情况 ) ,就 应 该 执行 其 他 事务 。 而 且 一 旦 达到 第 二 个 测 
试点 状态 ,就 应 调用 恢复 过 程 。 在 测试 不 完整 的 周期 时 ,所 使 用 的 技术 相同 ,只 不 过 应 该 
异常 终止 或 提前 终止 数据 库 进程 本 身 。 对 以 下 情况 的 测试 需要 达到 一 个 已 知 的 数据 库 状 
态 。 当 破坏 若干 个 数据 库 字段 、 指 针 和 关键 字 时 ,应 该 以 手工 方式 在 数据 库 中 (通过 数据 
库 工具 ) 直 接 进行 。 其 他 事务 应 该 通过 使 用 “应 用 程序 功能 测试 "和 “业务 周期 测试 "中 的 
测试 来 执行 ,并 且 应 执行 完整 的 周期 。 
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9.8.4 完成 标准 


在 所 有 上 述 情况 中 ,应 用 程序 ,数据 库 和 系统 应 该 在 恢复 过 程 完成 时 立即 返回 到 一 个 
已 知 的 预期 状态 。 此 状态 包括 仅 限于 已 知 损坏 的 字段 .指针 或 关键 字 范 围 内 的 数据 损坏 ， 
以 及 表明 进程 或 事务 因 中 断 而 未 被 完成 的 报表 。 

恢复 测试 会 给 其 他 操作 带 来 许多 的 麻烦 。 断 开 缆 线 连接 的 方法 (模拟 断 电 或 通信 中 
断 ) 可 能 并 不 可 取 或 不 可 行 。 所 以 ,可 能 会 需要 采用 其 他 方法 ,例如 诊断 性 软件 工具 。 人 恢 
复 测试 对 其 他 类 型 的 测试 影响 很 大 ,一 般 需 要 使 用 相对 独立 的 系统 、 数 据 库 和 网 络 组 中 的 
资源 ,应 该 在 工作 时 间 之 外 在 独立 的 环境 中 进行 。 


9.9 安全 性 测试 


根据 ISO8402 的 定义 ,安全 性 是 “使 伤害 或 损害 的 风险 限制 在 可 接受 的 水 平 内 ”。 所 
以 直观 地 说 ,软件 的 安全 性 是 软件 的 一 种 内 在 属性 。 安 全 性 主要 是 指 文件 数据、 资料 的 
保密 问题 。 软 件 安全 性 和 可 靠 性 有 非常 紧密 的 联系 ,安全 事故 是 危害 度 最 大 的 失效 事件 ， 
因此 软件 可 靠 性 要 求 通常 包括 了 安全 性 的 要 求 。 但 是 软件 的 可 靠 性 不 能 完全 取代 软件 的 
安全 性 ,因为 安全 性 要 求 包括 了 在 非 正常 条 件 下 不 发 生 安全 事故 的 能 力 。 

安全 性 一 般 分 为 两 个 层次 , 即 应 用 程序 级 别 和 系统 级 别 。 应 用 程序 级 别 的 安全 性 , 包 
括 对 数据 或 业务 功能 的 访问 ;系统 级 别 的 安全 性 ,包括 对 系统 的 登录 或 远程 访问 。 

对 于 应 用 程序 级 别 的 安全 性 ,可 确保 在 预期 的 安全 性 情况 下 ,操作 者 只 能 访问 特定 的 
功能 或 用 例 , 或 者 只 能 访问 有 限 的 数据 。 例 如 , 某 财务 系统 可 能 会 允许 所 有 人 输入 数据 ， 
创建 新 账户 ,但 只 有 管理 员 才 能 删除 这 些 数据 或 账户 。 

对 于 系统 级 别 的 安全 性 ,可 确保 只 有 具备 系统 访问 权限 的 用 户 才 能 访问 应 用 程序 ,而 
且 只 能 通过 相应 的 网 关 来 访问 。 

安全 测试 就 是 检查 系统 对 非法 侵入 的 防范 能 力 。 测 试 期 间 ,测试 人 员 假扮 非 法 入 侵 
者 ,采用 各 种 办 法 试图 突破 防线 。 例 如 : 

。 想 方 设法 截取 或 破译 口令 ; 

。 专门 开发 软件 来 破坏 系统 的 保护 机 制 ; 

。 故意 导致 系统 失败 ,企图 趁 恢复 之 机 非法 进入 ; 

。 试图 通过 浏览 非 保密 数据 ,推导 所 需 信 息 等 。 

应 用 程序 级 别 的 安全 性 : 核实 操作 者 只 能 访问 其 所 属 用 户 类 型 已 被 授权 访问 的 那些 
功能 或 数据 。 系 统 级 别 的 安全 性 : 核实 只 有 具备 系统 和 应 用 程序 访问 权限 的 操作 者 才能 
访问 系统 和 应 用 程序 。 

理论 上 讲 , 只 要 有 足够 的 时 间 和 资源 ,没有 不 可 进入 的 系统 。 因 此 系统 安全 设计 的 准 
则 是 : 使 非法 侵入 的 代价 超过 被 保护 信息 的 价值 ,此 时 非法 侵入 者 已 无 利 可 图 。 

为 此 ,确定 并 列 出 各 用 户 类 型 及 其 被 授权 访问 的 功能 或 数据 。 为 各 用 户 类 型 创建 测 
试 ,并 通过 创建 各 用 户 类 型 所 特有 的 事务 来 核实 其 权限 。 修 改 用 户 类 型 并 为 相同 的 用 户 
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重新 运行 测试 。 对 于 每 种 用 户 类 型 ,确保 正确 地 提供 或 拒绝 了 这 些 附 加 的 功能 或 数据 。 

(1) 静态 的 代码 安全 测试 : 主要 通过 对 源 代 码 进行 安全 扫描 ,根据 程序 中 数据 流 、 控 
制 流 、 语 义 等 信息 与 其 特有 软件 安全 规则 库 进行 匹配 ,从 中 找 出 代码 中 潜在 的 安全 漏洞 。 
静态 的 源 代码 安全 测试 是 常用 的 方法 ,可 以 在 编码 阶段 找 出 所 有 可 能 存在 安全 风险 的 代 
码 ,这 样 在 早期 就 能 解决 潜在 的 安全 问题 。 

(2) 动态 的 渗透 测试 : 渗透 测试 也 是 常用 的 安全 测试 方法 ,使 用 自动 化 工具 或 者 人 
工 的 方法 模拟 黑客 的 输入 ,对 应 用 系统 进行 攻击 性 测试 ,从 中 找 出 运行 时 刻 所 存在 的 安全 
漏洞 。 这 种 测试 的 特点 就 是 真实 有 效 , 找 出 来 的 问题 一 般 更 为 严重 。 

(3) 程序 数据 扫描 。 一 个 有 高 安全 性 需求 的 软件 ,在 运行 过 程 中 数据 是 不 能 遭 到 破 
坏 的 ,否则 就 会 导致 缓冲 区 溢出 类 型 的 攻击 。 数 据 扫描 的 手段 通常 是 进行 内 存 测 试 ,内 存 
测试 可 以 发 现 许 多 诸如 缓冲 区 溢出 之 类 的 漏洞 ,而 这 类 漏洞 使 用 除 此 之 外 的 测试 手段 都 
难以 发 现 。 

各 种 已 知 的 操作 者 类 型 都 可 访问 相应 的 功能 或 数据 ,而 且 所 有 事务 都 按照 预期 的 方 
式 运 行 ,并 在 先前 的 应 用 程序 功能 测试 中 运行 了 所 有 的 事务 。 

只 要 有 足够 的 时 间 和 资源 ,好 的 安全 测试 最 终 将 能 够 入 侵 系 统 。 系 统 设计 人 员 的 作 
用 是 使 攻破 系统 所 付出 的 代价 大 于 攻破 系统 之 后 获取 信息 的 价值 。 


9.10 习题 


请 参考 课文 内 容 以 及 其 他 资料 ,完成 下 列 选择 题 。 
(1) 以 下 哪 种 软件 测试 不 属于 软件 性 能 测试 的 范畴 ? ( 。 ) 
A. 配置 测试 B. 健壮 性 测试 C. 失效 恢复 测试 D. 负载 测试 
(2) 以 下 目标 中 ,哪个 是 软件 性 能 测试 的 目标 ? ( ) 
A. 检查 软件 的 容错 能 力 B. 发 现 压力 下 软件 功能 的 缺陷 
C. 发 现 软件 的 安全 漏洞 D. 检查 用 户 界面 是 否 易 于 使 用 
(3) 以 下 关于 软件 可 靠 性 测试 的 说 法 中 ,正确 的 是 (  )。 
A. 软件 运行 剖面 的 定义 需要 符合 软件 的 实际 运行 情况 
B. 测试 用 例 的 生成 必须 采用 白 盒 测试 方法 
C. 软件 可 靠 性 测试 通常 能 够 比 黑 盒 测试 发 现 更 多 的 错误 
D. 软件 可 靠 性 测试 必须 在 集成 测试 中 实施 
(4) 以 下 哪 一 项 不 属于 软件 易 用 性 测试 关注 的 范畴 ? ( ) 
A. 软件 界面 的 色彩 是 否 协调 
B. 软件 是 否 能 在 多 种 操作 系统 下 运行 
C. 软件 是 否 支持 用 户 根据 自己 的 需要 进行 定制 
D. 软件 是 否 能 主动 引导 用 户 使 用 相互 关联 的 功能 
(5) 关于 软件 可 靠 性 的 说 法 中 ,正确 的 是 ( ye 
A. 软件 发 生物 理 退化 是 影响 软件 可 靠 性 的 重要 因素 
B. 同一 软件 即使 运行 于 不 同 硬件 环境 其 可 靠 性 保持 相同 
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C. 如 果 没 有 恶意 的 使 用 者 ,软件 总 是 可 靠 的 

D. 软件 可 靠 性 与 软件 的 使 用 方式 密切 相关 
(6) 以 下 关于 软件 性 能 测试 的 说 法 中 ,正确 的 是 (  )。 

A. 对 于 没有 并 发 的 应 用 系统 而 言 , 响 应 时 间 与 吞吐 量 成 反比 关系 

B. 应 用 系统 的 资源 利用 率 越 高 ,性 能 也 就 越 好 

C. 软件 性 能 测试 是 从 用 户 视角 考察 软件 性 能 

D. 并 发 进程 数 是 软件 性 能 测试 中 一 种 常用 的 性 能 指标 
(7) 以 下 哪 种 软件 测试 属于 软件 性 能 测试 的 范畴 ? 〈 ) 

A. 路 径 覆 盖 测 试 ” B. 并 发 测试 ”C. 安全 性 测试 ”D. 健壮 性 测试 
(8) 以 下 哪 种 软件 测试 属于 软件 性 能 测试 的 范畴 ? ( 。 ) 

A. 分 支 获 盖 测试 。 B. 极限 测试 。 C. 负载 测试 D. 硬件 兼容 性 测试 
(9) 以 下 哪 种 软件 测试 属于 软件 性 能 测试 的 范畴 ? 〈 ) 

A. 接口 测试 B. 压力 测试 C. 单元 测试 D. 易 用 性 测试 
(10) 以 下 关于 软件 可 靠 性 测试 的 说 法 中 ,正确 的 是 ( ) 。 

A. 软件 可 靠 性 测试 是 一 种 比 白 盒 测 试 更 严格 的 软件 测试 

B. 软件 可 靠 性 测试 的 代价 通常 比较 高 

C. 软件 可 靠 性 测试 本 质 上 是 一 种 黑 盒 单元 测试 

D. 软件 可 靠 性 测试 不 适用 于 面向 对 象 软件 测试 
(11) 以 下 关于 软件 性 能 测试 的 说 法 中 ,正确 的 是 ( 洛 

A. 达到 百分之百 的 语句 获 盖 是 软件 性 能 测试 的 一 个 前 提 条 件 

B. 并 发 进程 数 是 度量 软件 性 能 的 一 项 基本 指标 

C. 探测 软件 在 满足 预定 的 性 能 需求 的 情况 下 所 能 负担 的 最 大 压力 是 失效 恢复 

测试 的 主要 目的 之 一 

D. 发 现 压力 下 软件 功能 的 缺陷 是 软件 性 能 测试 的 主要 目的 之 一 
(12) 以 下 关于 软件 可 靠 性 测试 的 说 法 中 ,正确 的 是 ( 小 

A. 软件 可 靠 性 测试 能 有 效 地 减少 软件 在 恶意 使 用 下 出 现 崩 溃 的 次 数 

B. 软件 可 靠 性 测试 的 主要 目的 是 度量 软件 的 可 靠 性 

C. 在 一 次 软件 可 靠 性 测试 中 ,执行 的 侧 试用 例 可 以 不 完全 符合 所 定义 的 软件 

运行 剖面 

D. 软件 可 靠 性 测试 使 用 的 测试 用 例 必须 满足 语句 覆盖 
(13) 软件 性 能 的 指标 有 ( Ns 

J@ 响应 时 间 @ 系统 响应 时 间 和 应 用 延迟 时 间 @ 吞吐 量 

@ 并 发 用 户 数 。” @ 资源 利用 率 

AOOG@O BLOG@OOO 

COQ@OO D.OOGOOO@O 
(14) 性 能 测试 主要 用 于 实时 系统 和 嵌入 式 系统 ,其 目标 是 ( he 

A. 测试 各 种 资源 在 超 负荷 的 情况 下 的 运行 情况 

B. 检测 系统 可 以 处 理 目标 内 确定 的 数据 容量 


E 汪 系统 测试 技术 


C. 度量 系统 的 性 能 和 预先 定义 的 目标 有 多 大 差距 
D. 验证 系统 从 软件 或 者 硬件 失效 中 恢复 的 能 力 
(15) 软件 可 靠 性 的 基本 指标 不 包括 以 下 选项 当中 的 ( 大 
A. 规定 条 件 下 不 引起 系统 失效 的 概率 
B. 规定 时 间 内 不 引起 系统 失效 的 概率 
C. 在 规定 时 间 周 期 内 ,在 所 述 条 件 下 执行 所 要 求 的 功能 的 能 力 
D. 在 规定 人 员 操作 下 不 引起 系统 失效 的 概率 
(16) 在 软件 性 能 测试 中 ,下 列 指标 中 哪个 不 是 软件 性 能 的 指标 ? 〈 ) 
A. 响应 时 间 B. 吞吐 量 C. 资源 利用 率 ” D. 并 发 进程 数 
(17) 下 列 关于 软件 性 能 测试 的 说 法 中 ,正确 的 是 ( bi 
A. 性 能 测试 的 目的 不 是 为 了 发 现 软件 缺陷 
B. 压力 测试 与 负载 测试 的 目的 都 是 为 了 探测 软件 在 满足 预定 性 能 需求 的 情况 
下 所 能 负担 的 最 大 压力 
C. 性 能 测试 通常 要 对 测试 结果 进行 分 析 才 能 获得 测试 结论 
D. 在 性 能 下 降 曲线 上 ,最 大 建议 用 户 数 通常 处 于 性 能 轻微 下 降 区 与 性 能 急剧 
下 降 区 的 交界 处 
(18) 下 列 关 于 软件 可 靠 性 测试 的 说 法 中 ,错误 的 是 ( je 
A. 发 现 软件 缺陷 是 软件 可 靠 性 测试 的 主要 目的 
B. 软件 可 靠 性 测试 通常 用 于 有 可 靠 性 要 求 的 软件 
C. 在 一 次 软件 可 靠 性 测试 中 ,执行 的 测试 用 例 必 须 完 全 符合 所 定义 的 软件 运 
行 剖面 
D. 可 靠 性 测试 通常 要 对 测试 结果 进行 分 析 才 能 获得 测试 结论 
(19) 以 下 关于 软件 性 能 的 说 法 中 ,正确 的 是 ( js 
A. 软件 性 能 与 该 软件 的 实现 算法 无 关 
B. 软件 的 吞吐 量 越 大 ,其 平均 响应 时 间 总 是 越 短 
C. 给 软件 的 可 用 资源 越 少 ,其 平均 响应 时 间 越 短 
D. 对 于 一 个 网 络 ,其 支持 的 同时 发 送 请 求 的 用 户 数 越 大 ,该 网 站 的 性 能 越 好 
(20) 以 下 关于 软件 可 靠 性 测试 的 说 法 中 ,正确 的 是 ( ) 。 
A. 定义 软件 运行 剖面 是 软件 可 靠 性 测试 的 重要 步 又 
B. 软件 可 靠 性 测试 使 用 的 测试 用 例 应 该 满足 分 支 获 盖 
C. 软件 可 靠 性 测试 可 以 在 单元 测试 中 实施 
D. 软件 可 靠 性 预测 模型 的 作用 是 指导 软件 可 靠 性 测试 中 的 测试 用 例 生成 
(21) 以 下 哪 一 项 不 属于 兼容 性 测试 关注 的 范畴 ? ( ) 
A. 服务 器 端 是 否 同时 支持 浏览 器 和 专用 客户 端的 访问 
B. 软件 是 否 同时 支持 数据 库 的 不 同 版 本 
C. 软件 是 否 支持 以 前 版 本 的 数据 格式 
D. 软件 是 否 可 以 在 不 同 的 J2EE 应 用 服务 器 上 运行 
(22) 以 下 哪 项 属于 功能 易 用 性 测试 关注 的 范畴 ? 〈 ) 
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A. 软件 提供 的 功能 是 否 丰富 
B. 当 执行 耗 时 较 长 的 任务 时 ,软件 是 否 能 定时 向 用 户 提 示 当 前 任务 完成 的 
进度 
C. 软件 是 否 能 够 在 多 种 操作 系统 环境 下 运行 
D. 软件 是 否 能 在 不 同 的 硬件 配置 下 运行 
(23) 以 下 关于 软件 性 能 测试 的 说 法 中 不 正确 的 是 (  )。 
A. 发 现 软件 缺陷 是 性 能 测试 的 目的 之 一 
B. 压力 测试 与 负载 测试 的 目的 都 是 为 了 探测 软件 在 满足 预定 的 性 能 需求 的 情 
况 下 所 能 负担 的 最 大 压力 
C. 性 能 测试 通常 需要 对 测试 结果 进行 分 析 才 能 获得 测试 结论 
D. 检验 软件 的 最 大 负载 是 性 能 测试 的 目的 之 一 
(24) 以 下 哪 种 软件 测试 不 属于 广义 软件 性 能 测试 的 范畴 ? ( ) 
A. 并 发 测试 B. 压力 测试 。” C. 兼容 性 测试 ” D. 负载 测试 


9.11 实验 与 思考 
9.11.1 实验 目的 


本 节 “ 实 验 与 思考 ”的 目的 : 

(1) 熟悉 系统 测试 的 基本 内 容 及 相关 概念 。 

(2) 分 析 一 个 根据 简单 规格 确认 输入 数 有 效 性 的 应 用 程序 , 画 出 相应 的 状态 转换 图 ; 
根据 状态 转换 图 , 列 出 相应 的 状态 转换 表 ; 根 据 状态 转换 图 和 状态 转换 表 , 导 出 基本 路 径 
测试 的 测试 用 例 及 其 覆盖 的 测试 路 径 。 

(3) 分 析 一 个 C 源 程序 , 画 出 程序 中 所 有 函数 的 控制 流程 图 ,并 设计 一 组 测试 用 例 ， 
使 该 程序 所 有 函数 的 语句 覆盖 率 和 分 支 获 盖 率 均 能 达到 100%。 


9.11.2 工具 /准备 工作 


在 开始 本 实验 之 前 ,请 认真 阅读 课程 的 相关 内 容 。 
需要 准备 一 台 带 有 浏览 器 、 能 够 访问 因特网 的 计算 机 。 


9.11.3 实验 内 容 与 步骤 
1) 概念 理解 。 


请 查阅 有 关 资 料 ,根据 你 的 理解 和 看 法 ,给 出 下 列 概念 的 定义 : 
(1) 系统 测试 : 


(2) 功能 测试 : 
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(3) 性 能 测试 : 


(4) 压力 测试 : 


(5) 可 靠 性 测试 : 


(6) 容错 性 测试 : 


(7) 安全 性 测试 : 


2) 考虑 一 个 根据 以 下 简单 规格 确认 输入 数 有 效 性 的 应 用 程序 。 

。 输 入 数 由 数字 、 符 号 “十 ”或 一" 开始; 

。 该 数字 或 符号 后 面 可 接任 意 位 数 的 数字 ; 

。 这 些 数字 可 以 有 选择 地 后 接 用 英文 句号 表示 的 小 数 点 ; 

。 任 何 输入 数 , 不 管 是 否 有 小 数 点 ,都 应 该 以 空格 结束 。 

请 根据 以 上 处 理 规则 完成 以 下 任务 。 

(1) 请 在 一 白 纸 上 面 出 相应 的 状态 转换 图 ,并 粘贴 于 此 处 (相关 说 明 请 标注 于 图 上 )。 


(2) 根据 状态 转换 图 ,完成 表 9-1, 在 其 中 列 出 相应 的 状态 转换 ,给 出 “当前 状态 ”、 当 
前 状态 允许 的 “输入 ”和 对 应 每 一 个 输入 的 “下 一 个 状态 ”。 

表 9-1 

状 态 执行 情况 

当前 状态 

输入 

下 一 个 状态 

输入 

下 一 个 状态 

当前 状态 

路 径 

注 : 用 “Y" 表 示 执 行 “N" 表 示 不 执行 。 

(3) 根据 状态 转换 图 和 状态 转换 表 , 导 出 基本 路 径 测试 的 测试 用 例 及 其 覆盖 的 测试 
路 径 。 

(0 
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已 知 C 源 程序 如 下 : 
#include< stdio.h> 
#include< string.h> 
void reverse (char a[]) { 
二 总 二 下 
for (i=0, 于 strlen(s)-1; i<j; it+, j++) { 
cs[i]; 
3[i]= sD]; 


3D]=c? 


void getHex (int numibber，char a[]) { 


while (numiber> 0) { 
if (numibers 16< 10) 


Ss[ 计 + ]=number$® 16+ '0';» 


switch (numibers 16) { 

case 10: s[ 计 + ]= 'A'; break; 
case 11: s[ 计 + ]= 'B'7 break; 
case 12: s[it+]='C'; break; 


case 13: s[it+]=" 


case 14: s[it+]= 
case 15: s[i+ +]= 'F'; break; 


default: printf ("Error"); break; 


} 


number/= 16; 


3[i]= "\0';» 


reverse (3); 


unsigned int nnber; 


char s[50]; 
Printf ("s s", "please input number: \n"); 
scanf (% d", Enunber); 
getHex (nmber, 5); 


E 汪 站 系统 测试 技术 


while (s[i]) 
Printf(%c" , s[it++]); 
retum 0; 
4 
(1) 请 在 一 白 纸 上 画 出 程序 中 所 有 函数 的 控制 流程 图 ,并 粘贴 于 此 处 (相关 说 明 请 标 
注 于 图 上 ) 


(2) 设计 一 组 测试 用 例 , 使 该 程序 所 有 函数 的 语句 覆盖 率 和 分 支 覆 盖 率 均 能 达 
到 100%。 


) 如 果 认 为 该 程序 的 语句 覆盖 率 或 分 支 率 无 法 达到 100%% , 需 说 明 为 什么 。 


站 Geeeeeee@ee 


9.11.4 实验 总 结 


9.11.5 实验 评价 (教师 ) 


9.12 阅读 与 分 析 : 我 所 了 解 的 手机 测试 


手机 测试 是 一 个 很 大 的 题目 ,涉及 硬件 测试 和 软件 测试 ,还 有 结构 的 测试 ,比如 抗 压 、 
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抗 摔 、 抗 疲劳 、 抗 低温 高 温 等 ,结构 上 的 设计 不 合理 ,会 造成 应 力 集 中 ,使 得 本 身 外 这 变形 ， 
对 于 翻盖 手机 ,盖子 失效 ,还 有 其 他 严重 问题 。 硬 件 测试 一 般 都 有 严格 的 物理 电气 指标 ， 
也 有 专门 的 仪器 ,专业 测试 人 员 对 此 不 会 陌生 。 

手机 测试 ,一 般 更 多 地 是 指 手 机 软件 测试 ,这 一 方面 说 明 软 件 在 手机 上 的 重要 性 , 另 
一 方面 也 说 明 手 机 软件 测试 的 难度 。 因 为 其 他 测试 都 有 明确 的 指标 ,严格 的 操作 规程 ,还 
有 各 种 仪器 。 

在 说 明 手 机 测试 之 前 ,首先 应 该 了 解 一 下 什么 是 谋 入 式 操作 系统 ,这 是 个 时 电 的 名 
词 ,虽然 我 们 已 经 被 内 入 式 操作 系统 的 产品 所 包 国 ,但 是 却 不 一 定 能 说 清楚 ,什么 是 说 入 
式 操作 系统 ,而 学 校 的 课堂 上 , 讲 的 也 不 多 ,所 以 很 多 人 对 此 感到 云 山 雾 罩 。 

简单 地 说 ,一 个 谋 入 式 操作 系统 就 是 为 完成 某 种 特定 功能 而 专门 开发 的 操作 系统 。 
这 个 操作 系统 的 功能 很 明确 ,不 像 大 型 操作 系统 ,范围 广泛 ,大 千 世 界 , 尽 在 其 中 ,而 嵌入 
式 操 作 系 统 只 为 完成 某 一 项 或 者 几 项 功能 。 

再 说 一 下 手机 的 特殊 性 ,也 就 是 要 求 对 响应 时 间 达 到 一 定 限制 范围 , 即 所 谓 的 实时 操 
作 系 统 。 如 果 一 个 电话 不 能 在 90 秒 内 接听 ,那么 对 方 会 挂 掉 。 而 你 的 操作 系统 还 没 反应 
过 来 ,那么 这 个 操作 系统 无 疑 是 失败 的 ,这 是 对 嵌入 式 操 作 系 统 实时 性 的 要 求 。 

作为 一 个 测试 人 员 , 你 必须 了 解 这 些 ,可 能 对 一 些 软 件 开 发 人 员 , 他 不 必 很 在 意 这 些 
方面 ,因为 他 只 要 了 解 自 己 模块 的 入 口 说 明和 出 口 说 明 就 可 以 。 但 是 测试 人 员 不 行 。 高 
级 测试 人 员 应 该 了 解 吝 入 操作 系统 的 特点 ,这 个 系统 不 像 Windows, 有 图 形 界面 可 以 输 
入 输出 ,也 不 像 DOS 用 命令 行 模式 ,所 有 这 些 都 需要 自己 编写 一 个 编辑 器 ,编写 一 个 交互 
界面 ,编写 一 个 输入 输出 界面 。 在 Windows 中 ,利用 一 些 API 和 一 些 MFC, 不 用 考虑 硬 
件 的 问题 ,因为 系统 已 经 完成 ,而 Windows 是 讲究 和 硬件 分 离 的 ,因为 这 样 可 以 保护 系统 
不 受 侵入 。 而 在 嵌入 式 系统 里 面 ,这 些 都 要 求 和 硬件 息息相关 。 手 机 测试 中 ,软件 出 现 故 
障 不 一 定 是 由 于 软件 的 错误 ,也 可 能 是 由 于 硬件 和 软件 没有 完美 地 结合 。 

因此 我 们 在 了 解 操 作 系 统 同 时 ,也 要 了 解 一 下 其 他 手机 硬件 性 能 ,比如 CPU, 存 储 
器 等 。 

CPU 的 处 理 运算 能 力 是 以 MIPS 来 衡量 的 ,当然 越 快 越 好 ,但 是 也 是 和 成 本 相关 的 ， 
我 不 知道 现在 MOTOROLA T39 的 CPU ,但 是 ,因为 是 PDA, 又 是 手写 屏幕 ,所 以 菜单 特 
别 得 慢 。 关 于 存储 器 需要 专门 做 出 说 明 , 因 为 这 里 的 存储 器 很 特别 ,不 像 PC, 手 机 没有 
硬盘 ! 

嵌入 式 系统 的 编程 语言 一 般 用 C, 而 且 也 是 用 得 最 多 的 ,也 有 其 他 语言 ,比如 C++。 
在 最 开始 时 用 汇编 ,但 是 汇编 难 懂 ,而 且 也 不 容易 移植 ,渐渐 地 被 C 代替 ,不 过 即使 如 此 ， 
在 启动 程序 时 候 , 要 启动 板子 ,也 就 是 电路 板 时 候 , 还 是 需要 用 一 些 汇编 语言 完成 

作为 一 个 嵌入 式 系统 的 程序 ,和 在 PC 上 运行 着 的 程序 没有 任何 不 同 , 唯 一 不 同 可 能 
是 在 PC 上 运行 的 程序 ,你 可 以 看 到 结果 一 一 如 果 你 用 输出 语句 的 话 ,而 在 这 里 ,你 是 看 
不 到 结果 的 。 除 非 你 加 上 LCD 硬件 ,然后 编写 了 LCD 驱动 程序 ,然后 再 编写 显示 程序 。 
编写 说 入 式 程序 ,一 切 都 要 自己 解决 。 我 们 的 手机 如 果 不 是 把 电源 切断 ,或 者 电源 消耗 到 
一 定 程度 的 话 ,是 会 一 直 在 使 用 的 ,所 以 ,手机 程序 是 一 直 在 运转 的 ,就 是 说 一 直 在 循环 ， 
这 个 对 于 了 解 嵌 入 式 程序 ,应 该 是 个 好 材料 一 一 吝 入 式 程序 就 是 一 个 无 限 循 环 的 程序 , 除 
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非 关 掉 电源 和 电源 因素 ,这 里 也 有 一 个 测试 点 : 硬件 中 断 是 最 高 级 的 , 它 会 终止 你 的 程 
序 , 即 使 你 现在 的 程序 级 别 很 高 ,比如 通话 ,如 果 没 电 了 ,一 切 会 over。 

手机 程序 就 是 在 一 个 无 限 循 环 的 程序 ,什么 时 候 跳 出 这 个 无 限 循 环 ? 你 关机 吧 , 如 果 
感到 不 高 兴 ,把 电池 却 下 来 ,因为 有 可 能 进入 死 循环 ,而 关机 键 失效 了 一 只 好 通过 取 下 
电池 。 

这 里 要 专门 说 明 一 下 存储 器 ,因为 很 多 手机 毛病 都 和 存储 有 关 , 而 且 很 多 问题 都 和 存 
储 相关 ,计算 机 的 存储 是 关键 ,而 手机 的 存储 更 是 关键 ,因为 计算 机 有 硬盘 作为 存储 ,而 手 
机 所 有 的 都 在 存储 器 里 。 

存储 器 分 为 几 类 ,RAM 随机 存储 器 .ROM 随机 只 读 存 储 器 还 有 现在 出 现 的 一 些 闪 
存 ,以 及 电子 可 编程 存储 和 非 易 失 存储 器 一 个 一 个 到 来 。RAM 随机 存储 器 ,其 中 又 有 
SRAM( 静 态 RAM) .DRAM( 动 态 RAM)。SRAM 只 要 电源 开 着 ,就 会 保存 ,我 们 打 电 
话 , 有 些 最 后 拨打 的 号 码 , 暂 时 是 存在 SRAM 中 的 ,不 会 立刻 写 入 通话 记录 。 只 有 正常 关 
机 , 才 会 写 入 ,如 果 取 电池 的 话 ,是 不 会 写 入 手机 的 通话 记录 的 ,如 果 在 通话 记录 中 出 现 了 
已 经 拨打 电话 ,但 是 没有 记录 的 情况 ,那么 有 可 能 和 这 个 存储 器 有 关 , 可 能 是 你 的 软件 错 
误 , 也 可 能 是 硬件 。DRAM 在 手机 上 用 得 不 多 ,因为 保留 数据 时 间 很 短 。 从 价格 上 看 ， 
SRAM 是 非常 昂贵 的 ,而 DRAM 相 比 很 便宜 。 

ROM 也 有 几 种 ,PROM( 可 编程 ROM ) 和 EPROM( 可 擦 除 可 编程 ROM)。 两 者 区 
别 是 ,PROM 是 一 次 性 的 ,也 就 是 软件 灌 入 后 ,这 个 就 完蛋 了 ,这 种 是 早期 的 产品 ,现在 已 
经 不 可 能 使 用 了 ,而 EPROM 则 是 通用 的 存储 器 。 这 些 存储 器 不 适合 手机 软件 产品 ,一 
般 使 用 较 少 。 

其 他 FLASH。 这 是 近来 手机 采用 最 多 的 存储 器 ,这 种 存储 器 结合 了 ROM 和 RAM 
的 长 处 ,但 是 不 属于 RAM 也 不 属于 ROM。 手 机 大 量 采用 的 NVRAM 非 易 失 存储 器 。 
和 SRAM 属性 差不多 ,EEPROM 是 电子 可 擦 除 可 编程 存储 器 。 闪 存 是 ROM 的 后 代 。 
手机 软件 一 般 放 在 EEPROM 中 ,EPROM 是 通过 紫外 光 的 照射 , 擦 除 原 先 的 程序 ,而 
EEPROM 是 通过 电子 擦 出 ,当然 价格 也 是 很 高 的 ,而 且 写 入 时 间 很 长 , 写 入 很 慢 , 所 以 前 
面 提 到 的 电话 号 码 , 一 般 先 放 在 SRAM 中 ,而 不 是 马上 写 入 EEPROM, 因 为 当时 有 很 重 
要 的 工作 要 做 一 一 通话 ,如 果 写 入 ,漫长 的 等 待 是 让 用 户 刀 无 可 刀 的 。NVRAM 是 一 个 
很 特别 的 存储 器 , 它 和 SRAM 相 类 似 , 但 是 价格 却 高 很 多 ,由 于 一 些 数据 实在 重要 , 断 电 
后 必须 保持 这 些 数据 ,所 以 只 能 存放 在 这 里 。 一 般 和 个 人 信息 有 关 的 数据 会 放 在 这 里 , 比 
如 和 SIM 卡 相关 的 数据 。 容量 大 小 也 只 有 几 百 字 节 。 

闪存 存储 器 是 所 有 手机 的 首选 ,综合 了 前 面 的 所 有 优点 ,不 会 断 电 丢失 数据 
(NVRAM) ,快速 读 取 , 且 电子 可 擦 除 可 编程 (EEPROMD) ,所 以 现在 手机 大 量 采 用 。 

说 了 这 么 多 存储 器 ,可 能 比较 糊涂 了 ,这 么 多 存储 器 , 完 竟 采用 哪 种 呢 ? 在 手机 发 展 
中 ,各 种 存储 器 都 用 过 ,至 于 现在 ,各 种 手机 采用 的 存储 器 是 不 同 的 ,这 个 和 成 本 相关 。 各 
种 存储 器 价格 不 一 样 , 性 价 比 最 优 组 合 原则 ,由 设计 者 决定 。 有 些 是 可 选 的 ,有 些 是 必须 
的 ,是 手机 方案 决定 的 。 我 们 只 是 了 解 各 种 存储 性 能 、 特 点 ,在 测试 中 判断 错误 原因 。 

资料 来 源 : 转自 领 测 软 件 测试 网 (http://www. ltesting. net) 。 
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第 10 章 ”验收 测试 与 回归 测试 技术 


确认 测试 之 后 ,软件 已 经 组 装 完成 ,接口 方面 的 错误 也 已 排除 ,软件 测试 的 最 后 一 
步 一 一 验收 测试 即 可 开始 。 验 收 测试 应 检查 软件 能 否 按 合同 要 求 进行 工作 , 即 是 否 满足 
软件 需求 说 明 书 中 的 确认 标准 。 验 收 测试 是 部 署 软件 之 前 的 最 后 一 个 测试 操作 。 

此 外 ,无 论 在 进行 系统 测试 还 是 功能 测试 , 当 发 现 一 些 严 重 缺陷 而 需要 修正 时 ,都 会 
构造 一 个 新 的 软件 包 或 软件 补丁 包 , 然 后 再 进行 测试 。 这 时 的 测试 不 仅 要 验证 被 修复 的 
软件 缺陷 是 否 真 的 被 解决 了 ,而 且 要 保证 以 前 测试 过 的 功能 依旧 正常 ,不 受 这 次 修改 的 负 
面 影 响 。 这 就 是 回归 测试 。 


10.1 验收 测试 的 定义 
验收 测试 的 目的 是 确保 软件 准备 就 绪 , 相 关 的 用 户 和 /或 独立 测试 人 员 根 据 测试 计划 


和 结果 来 决定 是 否 接收 系统 。 这 是 一 项 确定 产品 是 否 能 够 满足 合同 或 用 户 所 规定 需求 的 
测试 。 


10.1.1 验收 测试 标准 


实现 软件 确认 要 通过 一 系列 黑 盒 测试 ,同样 需要 制订 测试 计划 和 经 历 测 试 过 程 。 测 
试 计划 规定 测试 的 种 类 和 测试 进度 ,测试 过 程 则 定义 一 些 特殊 的 测试 用 例 , 旨 在 说 明 软 件 
与 需求 是 否 一 致 。 无 论 是 测试 计划 还 是 测试 过 程 ,都 应 该 着 重 考虑 软件 是 否 满足 合同 规 
定 的 所 有 功能 和 性 能 ,文档 资料 是 否 完整 、 准 确 , 人 机 界面 和 其 他 方面 (例如 ,可 移植 性 、 兼 
容 性 .错误 恢复 能 力 和 可 维护 性 等 ) 是 否 令 用 户 满意 等 。 验 收 测试 的 结果 有 两 种 可 能 : 一 
种 是 功能 和 性 能 指标 满足 软件 需求 说 明 的 要 求 , 用 户 可 以 接受 ; 另 一 种 是 软件 不 满足 软件 
需求 说 明 的 要 求 ,用 户 无 法 接受 。 项 目 如 果 进 行 到 这 个 阶段 才 发 现 严重 错误 和 偏差 ,一 般 
很 难 在 预定 的 工期 内 改正 ,因此 必须 与 用 户 协商 ,寻求 一 个 妥善 解决 问题 的 方法 。 

验收 测试 的 另 一 个 重要 环节 是 配置 复审 。 复 审 的 目的 在 于 保证 软件 配置 齐全 、 分 类 
有 序 ,并 且 包 括 软 件 维护 所 必须 的 细节 , 见 图 10-1。 

实施 验收 测试 的 常用 策略 有 3 种 , 即 正式 验收 ` 非 正式 验收 或 “测试 以 及 B 测试。 策 
略 的 选择 通常 建立 在 合同 需求 、 组 织 和 公司 标准 以 及 应 用 领域 的 基础 上 。 


10.1.2 正式 验收 测试 


正式 验收 测试 是 一 项 管理 严格 的 过 程 , 它 通常 是 系统 测试 的 延续 。 计 划 和 设计 这 些 
测试 的 周密 和 详细 程度 不 亚 于 系统 测试 。 采 用 的 测试 用 例 应 该 是 系统 测试 中 所 执行 测试 


验收 测试 与 回归 测试 技术 


已 集成 的 软件 
有 效 的 软件 


交付 的 软件 
有 效 的 配置 


10-1 实施 验收 测试 


用 例 的 子 集 。 在 很 多 组 织 中 ,正式 验收 测试 是 完全 自动 执行 的 。 

在 某 些 组 织 中 ,开发 组 织 (或 其 独立 的 测试 小 组 ) 与 最 终 用 户 组 织 的 代表 一 起 执行 验 
收 测试 。 在 其 他 组 织 中 ,验收 测试 则 完全 由 最 终 用 户 组 织 执行 ,或 者 由 最 终 用 户 组 织 选择 
人 员 组 成 一 个 客观 公正 的 小 组 来 执行 。 

这 种 测试 形式 的 优点 是 : 

要 测试 的 功能 和 特性 都 是 已 知 的 。 

测试 的 细节 是 已 知 的 并 且 可 以 对 其 进行 评测 。 
测试 可 以 自动 执行 ,支持 回归 测试 。 

可 以 对 测试 过 程 进行 评测 和 监测 。 

可 接受 性 标准 是 已 知 的 。 

其 缺点 包括 : 

。 要 求 大 量 的 资源 和 计划 。 

。 这 些 测试 可 能 是 系统 测试 的 再 次 实施 。 


。 可 能 无 法 发 现 软件 中 由 于 主观 原因 造成 的 缺陷 ,这 是 因为 通常 只 查找 预期 要 发 现 
的 缺陷 。 


10.1.3 非 正式 验收 测试 


在 非 正 式 验收 测试 中 ,对 执行 测试 过 程 的 限定 不 像 正 式 验收 测试 中 那样 严格 。 在 此 
测试 中 ,确定 并 记录 要 研究 的 功能 和 业务 任务 ,但 没有 可 以 遵循 的 特定 测试 用 例 。 测 试 内 
大 多 数 情况 下 , 非 正 式 验收 测试 是 由 最 终 用 户 组 织 执行 的 。 
这 种 测试 形式 的 优点 是 : 
。 要 测试 的 功能 和 特性 都 是 已 知 的 。 
。 可 以 对 测试 过 程 进行 评测 和 监测 。 
。 可 接受 性 标准 是 已 知 的 。 
。 与 正式 验收 测试 相 比 ,可 以 发 现 更 多 由 于 主观 原因 造成 的 缺陷 。 
其 缺点 包括 : 
。 要 求 资源 ,计划 和 管理 资源 。 
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。 无 法 控制 所 使 用 的 测试 用 例 。 

。 最 终 用 户 可 能 沿用 系统 工作 的 方式 ,并 可 能 无 法 发 现 缺 陷 。 

。 最终 用 户 可 能 专注 于 比较 新 系统 与 遗留 系统 ,而 不 是 专注 于 查找 缺陷 。 
。 用 于 验收 测试 的 资源 不 受 项 目的 控制 ,并 且 可 能 受到 压缩 。 


10.1.4 w 测试 与 了 测试 


对 软件 开发 者 而 言 , 预 见 用 户 如 何 实际 使 用 一 个 程序 几乎 是 不 可 能 的 。 软 件 使 用 手 
册 可 能 会 被 错误 理解 ;可 能 会 使 用 令 用 户 感到 奇怪 的 数据 连接 ;测试 者 看 起 来 很 明显 的 输 
出 对 现场 用 户 来 说 却 是 难以 理解 的 等 。 因 此 ,软件 是 否 真正 满足 最 终 用 户 的 要 求 ,应 由 用 
户 进 行 一 系列 “验收 测试 ”, 此 时 多 采用 称 为 a.B 测试 的 过 程 ,用 来 发 现 那 些 似乎 只 有 最 终 
用 户 才能 发 现 的 问题 。 

a 测试 是 指 软件 开发 公司 组 织 内 部 人 员 模 拟 各 类 用 户 对 即将 面市 的 软件 产品 ( 称 为 a 
版 本 ) 进 行 测试 ,试图 发 现 错误 并 修正 。a 测试 在 受 控 的 环境 下 进行 ,其 关键 在 于 尽 可 能 
逼真 地 模拟 实际 运行 环境 和 用 户 对 软件 产品 的 操作 ,并 尽 最 大 努力 涵盖 所 有 可 能 的 用 户 
操作 方式 。 经 过 a 测试 调整 的 软件 产品 称 为 B 版本。 

B 测 试 在 一 个 或 多 个 最 终 用 户 场所 进行 。 与 a 测试 不 同 ,开发 者 通常 不 在 场 ,因此 ,B 
测试 是 不 受 开 发 者 控制 的 软件 “现场 ”应 用 。 最 终 用 户 记录 测试 过 程 中 遇见 的 所 有 问题 
(现实 存在 的 或 想象 的 ) 定 期 报告 给 开发 者 。 接 到 8B 测试 的 问题 报告 之 后 ,开发 人 员 对 软 
件 进行 修改 ,然后 准备 向 最 终 用 户 发 布 软件 产品 。B 测试 的 一 种 变 体 称 为 客户 验收 测试 ， 
有 时 是 按照 合同 交付 给 客户 时 进行 的 。 客 户 执行 一 系列 的 特定 测试 ,试图 在 从 开发 者 那 
里 接收 软件 之 前 发 现 错误 。 


10.2 验收 测试 的 内 容 与 过 程 


从 软件 质量 子 特性 角度 出 发 ,确定 验收 测试 的 测试 内 容 主 要 包括 : 适合 性 、 准 确 性 、 
互 操作 性 ,安全 保密 性 \ 成 熟 性 、 容 错 性 、 易 恢复 性 、 易 理解 性 、 易 学 性 、 易 操作 性 、 吸 引 性 、 
时 间 特 性 、 资 源 利用 性 、 易 分 析 性 、 易 改变 性 、 稳 定性 、 易 测试 性 、 适 应 性 、 易 安装 性 、 共 存 
性 、 易 替换 性 和 依从 性 等 方面 。 

具体 的 验收 测试 内 容 通常 包括 : 安装 (升级 )、 启 动 与 关机 ,功能 测试 (重要 算法 、 边 界 
等 ) .错误 处 理 , 性 能 测试 (正常 的 负载 .容量 变化 ) 、 压 力 测试 (临界 的 负载 、 容 量变 化) 、 配 
置 测试 .平台 测试 .安全 性 测试 ,恢复 测试 (在 出 现 掉 电 、 硬 件 故障 或 切换 、 网 络 故障 等 情况 
时 ,系统 是 否 能 够 正常 运行 ) ,可 靠 性 测试 等 。 

如 果 执 行 了 所 有 的 测试 案例 ,测试 程序 或 脚本 ,用 户 在 测试 中 发 现 的 所 有 软件 问题 都 
已 解决 ,而 且 所 有 的 软件 配置 均 已 更 新 和 审核 ,用 户 验收 测试 就 完成 了 。 
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10.2.1 测试 策划 


测试 分 析 人 员 根 据 需 方 的 软件 要 求 和 供 方 提供 的 软件 文档 分 析 被 测 软 件 , 并 确定 以 
下 内 容 : 

(1) 测试 充分 性 要 求 。 确 定 测试 应 覆盖 的 范围 及 每 一 范围 所 要 求 的 覆盖 程度 。 

(2) 测试 终止 的 要 求 。 指 定 测试 过 程 正常 终止 的 条 件 ( 如 测试 充分 性 是 否 达到 要 
求 ) ,并 确定 导致 测试 过 程 异 常 终止 的 可 能 情况 (如 接口 错误 ) 。 

(3) 用 于 测试 的 资源 要 求 。 包 括 软 件 ( 如 操作 系统 、 编 译 软 件 .静态 分 析 软 件 .测试 数 
据 产生 软件 ,测试 结果 获取 和 处 理 软 件 、 测 试 驱动 软件 等 ) .硬件 (如 计算 机 、 设 备 接口 等 )、 
人 员 数 量 、 人 员 技 能 等 。 

(4) 需要 测试 的 软件 特性 。 根 据 需 方 的 软件 要 求 确定 系统 的 功能 、 性 能 、 状 态 、 接 口 、 
数据 结构 ,设计 约束 等 内 容 和 要 求 对 其 标识 。 

(5) 测试 需要 的 技术 和 方法 ,如 测试 数据 生成 和 验证 技术 、 测 试 数据 输入 技术 、 测 试 
结果 获取 技术 、 是 否 使 用 标准 测试 集 等 。 

(6) 根据 测试 合同 (或 项 目 计划 ) 的 要 求 和 被 测 软 件 的 特点 ,确定 测试 准 出 条 件 。 

(7) 由 资源 和 被 测 软 件 决定 的 验收 测试 活动 的 进度 。 

(8) 对 测试 工作 进行 风险 分 析 与 评估 ,并 制定 应 对 措施 。 

根据 上 述 分 析 结 果 和 凡 有 可 利用 的 测试 结果 就 不 必 重 新 测试 的 原则 ,按照 测试 规范 
的 要 求 编写 验收 测试 计划 。 

应 对 验收 测试 计划 进行 评审 。 评 审 测试 的 范围 和 内 容 、 资 源 、 进 度 、 各 方 责任 等 是 否 
明确 ,测试 方法 是 否 合理 有 效 和 可 行 ,风险 的 分 析 、 评 估 与 对 策 是 否 准 确 可 行 。 测 试 文档 
是 否 符合 规范 ,测试 活动 是 否 独 立 。 验 收 测试 计划 应 通过 软件 的 需 方 . 供 方 和 有 关 专 家 参 
加 的 评审 ,然后 进入 下 一 步 工作 。 


10.2.2 测试 设计 


测试 设计 工作 由 测试 设计 人 员 和 测试 程序 员 完成 ,一 般 根据 验收 测试 计划 完成 以 下 
工作 

(1) 设计 测试 用 例 将 需 测试 的 软件 特性 分 解 ,针对 分 解 后 的 每 种 情况 设计 测试 用 例 。 

(2) 获取 测试 数据 。 包 括 获取 现 有 的 测试 数据 和 生成 新 的 数据 ,并 按照 要 求 验 证 所 
有 数据 。 

(3) 确定 测试 顺序 。 可 从 资源 约束 、 风 险 以 及 测试 用 例 失效 造成 的 影响 或 后 果 几 个 
方面 考虑 。 

(4) 获取 测试 资源 。 对 于 支持 测试 的 软件 ,有 的 需要 从 现 有 的 工具 中 选 定 , 有 的 需要 
开发 。 

(5) 编写 测试 程序 。 包 括 开发 测试 支持 工具 。 

(6) 建立 和 校准 测试 环境 。 
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(7) 按照 合同 和 有 关 标 准 要 求 编写 验收 测试 说 明 。 

应 对 验收 测试 说 明 进行 评审 。 评 审 测试 用 例 是 否 正确 、 可 行 和 充分 ,测试 环境 是 否 正 
确 、 合 理 , 测 试 文档 是 否 符合 规范 。 评 审 应 由 软件 的 需 方 、 供 方 和 有 关 专 家 参加 ,在 验收 测 
试 说 明 通 过 评审 后 ,进入 下 一 步 工 作 。 


10.2.3 测试 执行 


执行 测试 的 工作 由 测试 员 和 测试 分 析 员 完 成 。 

测试 员 的 主要 工作 是 执行 验收 测试 计划 和 验收 测试 说 明 中 规定 的 测试 项 目 和 内 容 。 
在 执行 过 程 中 ,应 认真 观察 并 如 实地 记录 测试 过 程 、 测 试 结 果 和 发 现 的 差错 ,认真 填写 测 
试 记 录 。 

测试 分 析 员 的 工作 主要 有 如 下 两 方面 : 

(1) 根据 每 个 测试 用 例 的 期 望 测试 结果 、 实 际 测试 结果 和 评价 准则 判定 该 测试 用 例 
是 否 通过 。 如 果 不 通过 ,测试 分 析 员 应 认真 分 析 情 况 , 并 根据 具体 情况 采取 相应 措施 。 

(2) 当 所 有 的 测试 用 例 都 执行 完毕 ,测试 分 析 员 要 根据 测试 的 充分 性 要 求 和 失效 记 
录 , 确 定 测试 工作 是 否 充 分 ,是 否 需要 增加 新 的 测试 。 当 测试 过 程 正常 终止 时 ,如 果 发 现 
测试 工作 不 足 , 应 对 软件 进行 补充 测试 ,直到 测试 达到 预期 要 求 , 并 将 附加 的 内 容 记录 在 
验收 测试 报告 中 。 当 测试 过 程 异常 终止 时 ,应 记录 导致 终止 的 条 件 、 未 完成 的 测试 和 未 被 
修正 的 差错 。 


10.2.4 测试 总 结 


测试 分 析 员 应 根据 需 方 的 软件 要 求 验收 测试 计划 、 验 收 测试 说 明 、 测 试 记录 和 软件 
问题 报告 单 等 ,分 析 和 评价 测试 工作 。 需 要 在 验收 测试 报告 中 记录 以 下 内 容 : 

(1) 总 结 验收 测试 计划 和 验收 测试 说 明 的 变化 情况 及 其 原因 ; 

(2) 对 测试 异常 终止 情况 ,确定 未 能 被 测试 活动 充分 覆盖 的 范围 ， 

(3) 确定 未 能 解决 的 软件 测试 事件 以 及 不 能 解决 的 理由 ; 

(4) 总 结 测试 所 反映 的 软件 系统 与 需 方 的 软件 要 求 之 间 的 差异 ; 

(5) 将 测试 结果 连同 所 发 现 的 差错 情况 同 需 方 的 软件 要 求 对 照 ,评价 软件 系统 的 设 
计 与 实现 ,提出 软件 改进 建议 ; 

(6) 按照 测试 规范 的 要 求 编写 验收 测试 报告 ,该 报告 应 包括 : 测试 结果 分 析 、 对 软件 
系统 的 评价 和 建议 ; 

(7) 根据 测试 记录 和 软件 问题 报告 单 编写 测试 问题 报告 。 

应 对 验收 测试 的 执行 活动 验收 测试 报告 ,测试 记录 和 测试 问题 报告 进行 评审 。 评 审 
测试 执行 活动 的 有 效 性 、 测 试 结果 的 正确 性 和 合理 性 ,评审 是 否 达到 了 测试 目的 ,测试 文 
档 是 否 符合 要 求 。 评 审 应 由 软件 的 需 方 、 供 方 和 有 关 专 家 参加 。 
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10.3 回归 测试 的 定义 


回归 测试 的 目的 是 : 当 测 试 软件 变更 之 后 ,变更 部 分 的 正确 性 和 对 变更 需求 的 符合 
性 ,以 及 软件 原 有 的 、 正 确 的 功能 、 性 能 和 其 他 规定 的 要 求 的 不 损害 性 。 

回归 测试 的 对 象 包括 : 

(1) 未 通过 软件 单元 测试 的 软件 ,在 变更 之 后 ,应 对 其 进行 单元 测试 ;对 下 列 其 他 测 
试 活动 , 均 应 在 变更 之 后 ,首先 对 变更 的 软件 单元 进行 测试 ; 

(2) 未 通过 软件 配置 项 测试 的 软件 ,再 进行 相关 的 集成 测试 和 配置 项 测试 ; 

(3) 未 通过 系统 测试 的 软件 ,再 进行 相关 的 集成 测试 .软件 配置 项 和 系统 测试 ; 

(4) 因 其 他 原因 进行 变更 之 后 的 软件 单元 ,再 进行 相关 的 软件 测试 。 


10.3.1 技术 要 求 


软件 回归 测试 应 符合 以 下 原则 : 

(1) 对 变更 的 软件 单元 的 测试 应 符合 原 软件 单元 测试 的 技术 要 求 。 

(2) 对 变更 的 软件 单元 和 受 变更 影响 的 软件 进行 集成 测试 ,应 符合 原 软件 集成 测试 
的 技术 要 求 。 

(3) 对 变更 的 和 受 变更 影响 的 软件 配置 项 的 测试 ,应 符合 原 软件 配置 项 测试 的 技术 

要 求 。 
(4) 对 变更 的 系统 的 测试 ,应 符合 原 系统 测试 的 技术 要 求 。 
(5) 当 回 归 测 试 结 果 和 原 软件 单元 测试 .软件 集成 测试 ,软件 配置 项 测试 和 系统 测试 
的 正确 结果 不 一 致 时 ,应 对 出 现 问 题 的 软件 单元 和 受 该 单元 影响 的 已 集成 软件 .软件 配置 
项 和 系统 重新 进行 回归 测试 。 

回归 测试 的 技术 要 求 ,可 根据 受 影响 情况 进行 裁剪 。 


10.3.2 测试 环境 


软件 回归 测试 的 测试 环境 主要 有 : 

(1) 单元 回归 测试 的 测试 环境 要 求 应 与 原单 元 测试 的 测试 环境 要 求 一 致 

(2) 对 于 变更 的 软件 单元 和 受 变 更 影响 的 软件 进行 集成 的 测试 ,其 测试 环境 要 求 应 
与 原 软件 集成 测试 的 测试 环境 要 求 一 致 ; 

(3) 对 于 变更 的 和 受 变 更 影响 的 软件 配置 项 的 测试 ,其 测试 环境 要 求 应 与 原 软件 配 
置 项 测试 的 测试 环境 要 求 一 致 ; 

(4) 对 于 变更 的 系统 的 测试 ,其 测试 环境 要 求 应 与 原 系统 测试 的 测试 环境 要 求 一 致 
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10.3.3 测试 方法 


当 未 增加 新 的 测试 内 容 时 ,软件 单元 回归 测试 应 采用 原 软件 单元 测试 的 测试 方法 。 

软件 配置 项 回归 测试 和 系统 回归 测试 不 排除 使 用 标准 测试 集 和 经 认可 的 系统 功能 测 
试 方法 。 本 测试 方法 是 重复 软件 配置 项 和 软件 系统 开发 各 阶段 的 相关 工作 ,主要 包括 : 

(1) 对 于 变更 的 软件 单元 的 测试 , 当 未 增加 新 的 测试 内 容 时 ,对 变更 的 软件 单元 的 测 
试 采用 原 软件 单元 测试 的 测试 方法 。 

(2) 对 于 变更 的 软件 单元 和 受 变更 影响 的 软件 进行 集成 的 测试 。 当 未 增加 新 的 测试 
内 容 时 ,对 受 影响 的 软件 进行 集成 测试 采用 原 软件 集成 测试 的 测试 方法 。 

(3) 对 于 变更 的 和 受 变更 影响 的 软件 配置 项 的 测试 , 当 未 增加 新 的 测试 内 容 时 ,对 受 
变更 影响 的 软件 配置 项 的 测试 采用 原 软件 配置 项 测试 的 测试 方法 。 

(4) 对 于 变更 的 系统 的 测试 。 当 未 增加 新 的 测试 内 容 时 ,系统 测试 采用 原 系 统 测试 方法 。 

(5) 具备 相关 测试 的 设施 环境 。 


10.3.4 准 入 条 件 


进入 回归 测试 一 般 应 具备 以 下 条 件 : 

(1) 被 测 软 件 ( 单 元 ) 完 成 变更 且 已 经 置 于 软件 配置 管理 之 下 ; 

(2) 相关 的 软件 变更 报告 单 软 件 测试 报告 .软件 变更 报告 单 齐全 ; 
(3) 具有 测试 相关 的 全 部 文档 及 资源 ; 

(4) 具备 相关 测试 的 设施 环境 。 


10.3.5 准 出 条 件 


软件 回归 测试 的 准 出 条 件 用 来 评价 回归 测试 的 工作 是 否 达 到 要 求 。 软 件 单元 回归 测 
试 的 准 出 条 件 与 原 软件 单元 测试 的 准 出 条 件 一 致 。 软 件 配置 项 回归 测试 和 系统 回归 测试 
一 般 应 符合 以 下 原则 : 

(1) 按照 软件 集成 测试 和 系统 测试 的 要 求 完成 了 对 变更 的 和 受 变更 影响 的 软件 的 集 
成 测试 ,并 且 无 新 问题 出 现 ; 

(2) 对 变更 的 软件 配置 项 或 系统 的 回归 测试 应 符合 原 软件 配置 项 测试 或 系统 测试 的 
准 出 条 件 ,并 且 无 新 间 题 出 现 。 另 外 ,软件 配置 项 回归 测试 或 系统 回归 测试 的 文档 应 齐 
全 ,符合 规范 。 


10.4 回归 测试 的 内 容 与 过 程 


对 于 单元 回归 测试 ,配置 项 回归 测试 和 系统 回归 测试 来 说 ,一 般 应 根据 软件 的 变更 情 
况 确定 回归 测试 的 测试 内 容 。 可 能 存在 以 下 情况 : 
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(1) 对 变更 的 软件 单元 的 测试 可 能 存在 以 下 3 种 情况 : 一 是 仅 重 复 测 试 原 软件 单元 
测试 做 过 的 测试 内 容 ; 二 是 修改 原 软件 单元 测试 做 过 的 测试 内 容 ; 三 是 在 前 两 者 的 基础 上 
增加 新 的 测试 内 容 。 

(2) 在 配置 项 回归 测试 和 系统 回归 测试 中 ,对 于 变更 的 软件 单元 和 受 变更 影响 的 软 
件 进行 集成 测试 。 测 试 分 析 员 应 分 析 变 更 对 软件 集成 的 影响 域 ,并 据 此 确定 回归 测试 
内 容 。 

(3) 在 配置 项 回归 测试 和 系统 回归 测试 中 ,对 于 变更 后 的 软件 配置 项 的 测试 ,测试 分 
析 员 应 分 析 变 更 对 软件 配置 项 的 影响 域 并 据 此 确定 回归 测试 内 容 。 

(4) 对 于 变更 的 系统 的 测试 ,测试 分 析 员 应 分 析 软 件 系统 受 变 更 影响 的 范围 ,并 据 此 
确定 回归 测试 内 容 。 

作为 软件 生命 周期 的 一 个 组 成 部 分 ,回归 测试 在 整个 软件 测试 过 程 中 占有 很 大 的 比 
重 ,软件 开发 的 各 个 阶段 都 可 能 需要 进行 多 次 回归 测试 。 在 渐进 和 快速 迭代 开发 中 ,新 版 
本 的 连续 发 布 使 回归 测试 进行 得 更 加 频繁 ,而 在 极限 编程 (XP) 方 法 中 ,更 是 要 求 每 天 都 
进行 若干 次 回归 测试 。 因 此 ,通过 选择 正确 的 回归 测试 策略 来 改进 回归 测试 的 效率 和 有 
效 性 是 非常 有 意义 的 。 

在 软件 生命 周期 中 ,即使 一 个 得 到 良好 维护 的 测试 用 例 库 也 可 能 变 得 相当 大 ,使 得 每 
次 回归 测试 都 重新 运行 完整 的 测试 包 变 得 不 切实 际 ,时 间 和 成 本 约束 也 不 允许 进行 一 个 
完全 的 测试 ,需要 从 测试 用 例 库 中 选择 有 效 的 测试 用 例 , 构 造 一 个 缩减 的 测试 用 例 组 来 完 
成 回归 测试 。 

回归 测试 可 遵循 下 述 基本 过 程 : 

(1) 识别 出 软件 中 被 修改 的 部 分 。 

(2) 从 原 基 线 测试 用 例 库 中 排除 所 有 不 再 适用 的 测试 用 例 , 确 定 那些 对 新 的 软件 
版 本 依然 有 效 的 测试 用 例 , 其 结果 是 建立 一 个 新 的 基线 测试 用 例 库 T0 。 

(3) 依据 一 定 的 策略 从 To 中 选择 测试 用 例 测试 被 修改 的 软件 。 

(4) 如 果 回 归 测 试 包 不 能 达到 所 需 的 获 盖 要 求 ,必须 补充 新 的 测试 用 例 使 获 盖 率 达 
到 规定 的 要 求 ,生成 新 的 测试 用 例 集 T1, 用 于 测试 To 无 法 充分 测试 的 软件 部 分 。 

(5) 用 TI1 执行 修改 后 的 软件 。 

第 (2) 和 第 (3) 步 测试 验证 修改 是 否 破坏 了 现 有 的 功能 ,第 (4) 和 第 (5) 步 测试 验证 修 
改 工作 本 身 。 


10.5 回归 测试 的 实施 
10.5.1 单元 回归 测试 

软件 单元 回归 测试 通常 应 由 原 测试 方 组 织 并 实施 ,特殊 情况 下 可 交 由 其 他 测试 方 进 
行 ,测试 管理 应 纳入 软件 开发 过 程 中 。 


软件 单元 回归 测试 的 测试 过 程 按 顺序 包括 下 面 几 步 : 
(1) 测试 分 析 员 根据 测试 问题 报告 和 软件 变更 报告 单 , 分 析 回归 测试 的 测试 范围 ,并 
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确定 原 软件 单元 测试 的 充分 性 要 求 .终止 要 求 资源 要 求 .软件 特性 ,测试 技术 和 方法 的 适 
用 程度 ,并 酌情 变更 ,确定 回归 测试 的 测试 进度 ,按照 测试 规范 完成 软件 单元 回归 测试 计 
划 , 并 对 软件 单元 回归 测试 计划 进行 评审 。 

(2) 测试 设计 员 和 测试 程序 员 根据 软件 单元 回归 测试 计划 确定 测试 用 例 。 可 从 原 软 
件 单元 测试 说 明 中 选择 测试 用 例 或 修改 原 有 测试 用 例 或 设计 新 的 测试 用 例 , 补 充 相应 的 
测试 数据 ` 测 试 资源 和 测试 软件 ,建立 相应 的 测试 环境 ,确定 相应 的 测试 顺序 。 按 照 测试 
规范 编写 软件 单元 回归 测试 说 明 ,并 对 软件 单元 回归 测试 说 明 进 行 评审 。 

(3) 测试 员 和 测试 分 析 员 按照 软件 单元 回归 测试 说 明 对 变更 的 软件 单元 进行 测试 。 

(4) 测试 分 析 员 根据 原 测试 问题 报告 \、 原 软件 变更 报告 单 、 软 件 单元 回归 测试 计划 、 
测试 说 明 ,测试 记录 、 软 件 问 题 报告 单 对 回归 测试 的 工作 进行 总 结 ,编写 软件 单元 回归 测 
试 报告 ,测试 问题 报告 ,并 对 软件 单元 回归 测试 的 执行 活动 .测试 记录 ,软件 单元 回归 测试 
报告 和 测试 问题 报告 进行 评审 。 


10.5.2 配置 项 回归 测试 


配置 项 回归 测试 一 般 由 软件 的 供 方 组 织 , 可 由 供 方 实施 或 交 独 立 的 测试 机 构 实施 。 
对 供 方 实施 的 回归 测试 ,测试 管理 应 纳入 软件 开发 过 程 中 ; 对 独立 的 测试 机 构 ,测试 管理 
可 按照 配置 项 测试 ?实施 组 织 和 管理 。 

软件 配置 项 回归 测试 的 测试 过 程 按 顺序 包括 下 面 几 步 : 

(1) 按照 单元 回归 测试 的 内 容 对 变更 的 软件 单元 进行 测试 。 变 更 的 软件 单元 通过 测 
试 后 ,才能 对 有 关 的 软件 进行 集成 测试 。 

(2) 按照 “集成 测试 ?对 变更 的 和 受 影响 的 软件 进行 集成 测试 。 软 件 集成 测试 通过 
后 ,才能 对 软件 配置 项 进行 测试 。 

(3) 测试 分 析 员 根据 测试 问题 报告 .软件 变更 报告 单 ,分 析 软 件 配置 项 回归 测试 的 范 
围 ,确定 原 软件 配置 项 测试 的 充分 性 要 求 、 终 止 要求 .资源 要 求 . 软 件 特性 、 测 试 技术 和 方 
法 的 适用 程度 ,并 酌情 变更 ,确定 回归 测试 的 测试 进度 。 按 照 测 试 规范 完成 软件 配置 项 回 
归 测试 计划 ,对 软件 配置 项 回归 测试 计划 进行 评审 。 

(4) 测试 设计 员 和 测试 程序 员 根 据 软件 配置 项 回归 测试 计划 确定 测试 用 例 ,或 从 原 
软件 配置 项 测试 说 明 中 选择 测试 用 例 , 或 修改 原 有 测试 用 例 , 或 设计 新 的 测试 用 例 , 补 充 
相应 的 测试 数据 \ 测 试 资源 和 测试 软件 ,建立 相应 的 测试 环境 ,确定 相应 的 测试 顺序 。 按 
照 测 试 规范 编写 软件 配置 项 回归 测试 说 明 ,并 对 软件 配置 项 回归 测试 说 明 进 行 评审 。 

(5) 测试 员 和 测试 分 析 员 按照 软件 配置 项 回归 测试 说 明 对 软件 配置 项 进行 测试 。 

(6) 测试 分 析 员 根据 原 测试 问题 报告 . 原 软 件 变更 报告 单 .软件 配置 项 回归 测试 计 
划 、 测 试 说 明 、 测 试 记录 和 软件 问题 报告 单 对 回归 测试 的 工作 进行 总 结 , 编 写 软件 配置 项 
回归 测试 报告 和 测试 问题 报告 ,并 对 软件 配置 项 回归 测试 的 执行 活动 .测试 记录 、 软 件 配 
置 项 回归 测试 报告 和 测试 问题 报告 进行 评审 。 
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10.5.3 系统 回归 测试 


一 般 应 由 软件 的 需 方 或 供 方 组 织 系统 回归 测试 ,可 由 供 方 实施 ,或 交 独 立 的 测试 机 构 
实施 。 对 供 方 实施 的 回归 测试 ,测试 管理 应 纳入 软件 开发 过 程 中 ;对 独立 的 测试 机 构 , 测 
试管 理 按照 “系统 测试 ?实施 。 

系统 回归 测试 的 测试 过 程 按 顺 序 包 括 下 面 几 步 : 

(1) 按照 “单元 回归 测试 "的 内 容 对 变更 的 软件 单元 进行 测试 。 变 更 的 软件 单元 通过 
测试 后 ,才能 对 变更 的 和 受 影响 的 软件 进行 集成 测试 。 

(2) 按照 “集成 测试 ?对 变更 和 受 变更 影响 的 软件 进行 集成 测试 。 变 更 的 和 受 影响 的 
软件 通过 集成 测试 后 ,才能 对 变更 的 和 受 影响 的 软件 配置 项 进行 测试 。 

(3) 按照 “配置 项 回归 测试 ?对 变更 和 受 变更 影响 的 软件 配置 项 进行 测试 。 变 更 的 和 
受 影响 的 软件 配置 项 通过 测试 后 ,才能 进行 变更 的 系统 测试 。 

(4) 测试 分 析 员 根据 测试 问题 报告 .软件 变更 报告 单 ,分 析 系 统 测试 的 范围 ,确定 原 
系统 测试 的 充分 性 要 求 .终止 要 求 ,资源 要 求 .软件 特性 ,测试 技 术 和 方法 的 适用 程度 ,并 
酌情 变更 确定 回归 测试 的 测试 进度 ,按照 测试 规范 完成 系统 回归 测试 计划 ,并 对 系统 回归 
测试 计划 进行 评审 。 

(5) 测试 设计 员 和 测试 程序 员 根 据 系统 回归 测试 计划 确定 测试 用 例 。 可 从 原 系 统 测 
试 说 明 中 选择 测试 用 例 , 或 修改 原 有 测试 用 例 ,或 设计 新 的 测试 用 例 , 补 充 相应 的 测试 数 
据 , 测 试 资源 和 测试 软件 ,建立 相应 的 测试 环境 ,确定 相应 的 测试 顺序 。 按 照 测试 规范 编 
写 系统 回归 测试 说 明 对 系统 回归 测试 说 明 进行 评审 。 

(6) 测试 员 和 测试 分 析 员 按照 系统 回归 测试 说 明 对 系统 进行 测试 。 

(7) 测试 分 析 员 根据 原 测试 问题 报告 、 原 软件 变更 报告 单 、 系 统 回 归 测 试 计划 、 测 试 
说 明 ,测试 记录 和 软件 问题 报告 单 对 系统 回归 测试 的 工作 进行 总 结 ,编写 系统 回归 测试 报 
告 和 测试 问题 报告 ,并 对 系统 回归 测试 的 执行 活动 ,测试 记录 、 系 统 回 归 测 试 报告 和 测试 
问题 报告 进行 评审 。 


10.6 回归 测试 的 效率 和 有 效 性 


回归 测试 的 价值 在 于 它 是 一 个 能 够 检测 到 回归 错误 的 受 控 实 验 。 当 测试 组 选择 缩减 
的 回归 测试 时 ,有 可 能 忽略 了 那些 将 揭示 回归 错误 的 测试 用 例 ,而 错失 了 发 现 回 归 错 误 的 
机 会 。 然 而 ,如 果 采 用 了 代码 相依 性 分 析 等 安全 的 缩减 技术 ,就 可 以 决定 哪些 测试 用 例 可 
以 被 删除 而 不 会 影响 回归 测试 的 结果 。 

选择 回归 测试 策略 应 该 兼顾 效率 和 有 效 性 两 个 方面 ,下 面 的 这 些 方法 在 效率 和 有 效 
性 方面 的 侧重 点 有 所 不 同 。 

1) 再 测试 全 部 用 例 

选择 测试 用 例 库 中 的 全 部 测试 用 例 构成 回归 测试 包 , 这 是 一 种 比较 安全 的 方法 ,具有 
最 低 的 遗漏 回归 错误 的 风险 ,但 测试 成 本 最 高 。 再 测试 全 部 用 例 几 乎 可 以 应 用 到 任何 情 
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况 下 ,基本 上 不 需要 进行 用 例 分 析 和 设计 ,但 是 随 着 开发 工作 的 进展 ,测试 用 例 不 断 增多 
而 带 来 相当 大 的 工作 量 , 受 预算 和 进度 的 限制 。 

2) 基于 风险 选择 测试 

基于 一 定 的 风险 标准 从 测试 用 例 库 中 选择 回归 测试 包 。 首 先 运行 最 重要 的 、 关 键 的 
和 可 疑 的 测试 ,而 跳 过 那些 次 要 的 、 例 外 的 测试 用 例 或 那些 功能 稳定 的 模块 。 运 行 那些 次 
要 用 例 即 便 发 现 缺陷 ,这 些 缺 陷 的 严重 性 也 较 低 。 

3) 基于 操作 剖面 选择 测试 

如 果 测 试用 例 是 基于 软件 操作 剖面 开发 的 ,测试 用 例 的 分 布 情况 反映 了 系统 的 实际 
使 用 情况 。 回 归 测 试 所 使 用 的 测试 用 例 个 数 可 以 由 测试 预算 确定 ,回归 测试 可 以 优先 选 
择 那 些 针对 最 重要 或 最 频繁 使 用 的 功能 的 测试 用 例 ,释放 和 缓解 最 高 级 别 的 风险 ,有 助 于 
尽早 发 现 那些 对 可 靠 性 有 最 大 影响 的 故障 。 

4) 再 测试 修改 的 部 分 

当 测 试 者 对 修改 的 局 部 化 有 足够 的 信心 时 ,可 以 通过 相依 性 分 析 识 别 软件 的 修改 情 
况 并 分 析 修 改 的 影响 ,将 回归 测试 局 限于 被 改变 的 模块 和 它 的 接口 上 。 通 常 ,一 个 回归 错 
误 一 定 涉及 被 修改 的 或 新 加 的 代码 。 在 允许 的 条 件 下 ,回归 测试 尽 可 能 覆盖 受到 影响 的 
部 分 。 这 种 方法 可 以 在 一 个 给 定 的 预算 下 最 有 效 地 提高 系统 可 靠 性 ,但 需要 良好 的 经 验 
和 深入 的 代码 分 析 。 

综合 运用 多 种 测试 技术 是 常见 的 ,在 回归 测试 中 也 不 例外 ,测试 者 也 可 能 希望 采用 多 
种 回归 测试 策略 来 增强 对 测试 结果 的 信心 。 不 同 的 测试 者 可 能 会 依据 自己 的 经 验 和 判断 
选择 不 同 的 回归 测试 技术 和 方法 。 


10.7 习题 


请 参考 课文 内 容 以 及 其 他 资料 ,完成 下 列 选择 题 。 
(1) 以 下 哪 一 项 属于 兼容 性 测试 关注 的 范畴 ? ( ) 
A. 办 公 软 件 在 异常 退出 时 是 否 会 破坏 正在 处 理 的 文档 
B. 杀毒 软件 在 清除 病毒 时 是 否 会 破坏 办 公 软 件 的 文档 
C. 软件 同类 功能 的 使 用 风格 是 否 一 致 
D. 软件 提供 的 功能 与 用 户 手册 的 说 明 是 否 一 臻 
(2) 以 下 哪 一 项 属于 数据 兼容 性 测试 关注 的 范畴 ? 〈 ) 
A. 一 个 软件 是 否 支持 不 同 的 操作 系统 
B. 一 个 杀毒 软件 是 否 会 误 删 其 他 软件 保存 的 文件 
C. 一 个 文字 处 理 软件 的 操作 方式 是 否 与 同类 软件 的 操作 方式 一 致 
D. 一 个 电子 邮件 收发 软件 是 否 可 以 导入 以 前 版 本 保存 的 邮件 
(3) 以 下 关于 软件 回归 测试 的 说 法 中 错误 的 是 ( Ys 
A. 软件 变更 后 ,应 对 软件 变更 部 分 的 正确 性 和 对 变更 需求 的 符合 性 进行 测试 
B. 软件 变更 后 ,首先 应 对 变更 的 软件 单元 进行 测试 ,然后 再 进行 其 他 相关 的 
测试 
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C. 软件 变更 后 ,不 必 再 对 软件 原 有 正确 的 功能 .性 能 和 其 他 规定 的 要 求 进行 
测试 

D. 对 具体 的 软件 ,可 以 根据 软件 测试 合同 及 软件 的 重要 性 、 完 整 性 级 别 对 回归 
测试 内 容 进行 剪裁 

以 下 说 法 中 错误 的 是 (。”)。 

A. 验收 测试 是 以 需 方 为 主 的 测试 ,其 对 象 是 完整 的 、 集 成 的 计算 机 系统 

B. 验收 测试 的 技术 依据 是 软件 研制 合同 (或 用 户 需 求 或 系统 需求 ) 

C. 进行 验收 测试 的 软件 必须 已 经 通过 系统 测试 

D. 验收 测试 一 般 应 由 软件 的 需 方 组 织 ,不 可 以 委托 第 三 方 测试 机 构 实施 

(5) 有 关 软 件 验收 测试 的 说 法 中 ,错误 的 是 (。 ”)。 

A. 验收 测试 一 般 由 软件 的 需 方 组 织 

B. 验收 测试 的 技术 要 求 与 系统 测试 不 同 

C. 验收 测试 可 委托 第 三 方 测试 机 构 进行 

D. 验收 测试 由 独立 于 软件 开发 的 人 员 实 施 

以 下 有 关 回 归 测 试 的 说 法 中 错误 的 是 (。”)。 

A. 严格 来 说 ,回归 测试 不 是 一 个 测试 阶段 ,只 是 一 种 可 以 用 于 各 个 测试 阶段 的 
测试 技术 

B. 回归 测试 的 目标 是 保证 被 测 应 用 在 系统 被 修改 和 扩充 后 ,各 项 功能 依然 正确 

C. 回归 测试 可 以 在 系统 和 验收 测试 环境 下 进行 

D. 回归 测试 适合 采用 传统 手工 方法 来 完成 ,而 不 适合 使 用 自动 化 测试 工具 来 


(4 


(6 


完成 
(7) 检查 系统 能 否 正确 地 接收 输入 ,能 否 正确 地 输出 结果 ,这 属于 (  ”)。 
A. 安全 性 测试  B. GUI 测试 C. 功能 测试 D. 协议 一 致 性 测试 


(8 


以 下 哪 项 属于 软件 易 用 性 测试 关注 的 内 容 ? 〈 ) 
A. 软件 是 否 能 帮助 用 户 减 少 输入 中 的 重复 劳动 
B. 软件 界面 的 色彩 是 否 协 调 
C. 软件 是 否 允 许 用 户 导 入 由 该 软件 以 前 版 本 生成 的 数据 
D. 软件 的 界面 风格 是 否 与 同类 软件 的 界面 风格 一 致 
系统 测试 分 析 通 过 以 下 层次 进行 分 析 ( es 
中 用 户 层 ” @ 应 用 层 ”四 功能 层 ”团子 系统 层 ” @ 协议 /指标 
A.DO@OO@ BOQO@O 
COOOYO D.OQOOOO 
(10) 失效 回复 测试 (Recovery Testing) ,其 目标 是 ( Js 
A. 测试 各 种 资源 在 超 负荷 的 情况 下 的 运行 情况 
B. 检测 系统 可 以 处 理 目标 内 确定 的 数据 容量 
C. 度量 系统 的 性 能 和 预先 定义 的 目标 有 多 大 差距 
D. 验证 系统 从 软件 或 者 硬件 失效 中 恢复 的 能 力 
(11) 兼容 性 测试 是 指 ( )。 


(9 
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(12) 


(13) 


(14) 


(15) 


(16) 


(17) 


(18) 


(19) 


A. 针对 软件 对 运行 环境 的 依赖 进行 测试 ,以 验证 软件 是 否 能 够 在 所 有 期 望 的 
环境 中 运行 

B. 测试 本 款 软件 与 其 他 应 用 软件 是 否 能 在 同一 操作 系统 下 同时 执行 

C. 检测 软件 与 其 他 软件 是 否 能 正常 进行 信息 的 交流 和 传递 

D. 以 上 都 不 对 

以 下 分 析 技 术 中 , 哪 一 种 技术 不 属于 基于 性 能 计数 器 的 分 析 技 术 ? ( 。 ) 

A. 内 存 分 析 B. 处 理 器 分 析 ”C. 通信 中 断 分 析 D. 进程 分 析 

哪 一 种 技术 属于 基于 性 能 计数 器 的 性 能 分 析 技术 (  ) 

A. 字符 串 分 析 ”B. 处 理 器 分 析 ”C. 变量 分 析 D. 循环 次 数 分 析 

以 下 哪 种 技术 属于 基于 性 能 计数 器 的 分 析 技 术 ? (  ) 

A. 数据 流 分 析 ”B. 指针 分 析 C. 时 间 序 列 分 析 ”D. 进程 分 析 

以 下 关于 软件 可 靠 性 与 硬件 的 可 靠 性 主要 区 别 的 说 法 中 正确 的 是 ( ) 

A. 软件 的 每 个 拷贝 都 是 完全 一 样 的 ,而 按照 设计 生产 出 来 的 同 规格 硬件 总 有 
微小 差别 

B. 软件 经 常 面 临 恶意 的 使 用 者 ,而 硬件 没有 恶意 的 使 用 者 

C. 软件 的 使 用 者 通常 遍及 整个 世界 而 硬件 的 使 用 者 通常 只 局 限于 某 个 地 区 

D. 软件 的 失效 都 是 逻辑 错误 引起 的 ,而 硬件 的 失效 都 不 是 逻辑 错误 引起 的 

哪 一 项 不 属于 软件 易 用 性 测试 关注 的 范畴 ? (。 ) 

A. 软件 是 否 能 帮助 用 户 减 少 输入 中 的 重复 劳动 

B. 软件 的 用 户 界面 风格 是 否 与 其 他 软件 一 致 

C. 软件 是 否 支 持 用 户 根据 自己 的 需要 进行 定制 

D， 当 执行 耗 时 较 长 的 任务 时 ,软件 是 否 能 定时 向 用 户 提 示 当 前 任务 完成 的 
进度 

以 下 哪 一 项 属于 软件 易 用 性 测试 关注 的 内 容 ? (  ) 

A. Web 应 用 软件 是 否 支 持 不 同 厂商 开发 的 浏览 器 

B. 软件 是 否 提供 图 形 用 户 界面 

C. 软件 提供 的 功能 是 否 丰富 

D. 在 处 理 复杂 任务 时 ,软件 的 响应 时 间 是 否 符合 需求 

下 列 哪 一 项 不 属于 软件 功能 易 用 性 测试 关注 的 内 容 ? ( ) 

A. 软件 界面 的 色彩 是 否 协 调 

B. 软件 是 否 能 主动 禁止 用 户 可 能 进行 的 非法 操作 

C. 软件 是 否 允许 用 户 针对 自己 的 使 用 习惯 进行 定制 

D. 软件 是 否 能 帮助 用 户 减 少 输入 中 的 重复 劳动 

以 下 哪 一 项 属于 软件 易 用 性 测试 关注 的 范畴 ? ( ) 

A. 软件 是 否 能 在 多 种 操作 系统 下 运行 

B. 软件 是 否 能 与 同类 软件 共享 数据 

C. 软件 是 否 能 主动 禁止 用 户 可 能 进行 的 非法 操作 

D. 软件 是 否 能 抵御 网 络 攻击 
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10.8 实验 与 思考 
10.8.1 实验 目的 


本 节 “ 实 验 与 思考 ”的 目的 : 

(1) 熟悉 验收 测试 与 回归 测试 的 相关 概念 与 技术 。 

(2) 针对 一 个 租 书信 息 管 理 系统 中 管理 图 书 的 租借 业务 ,用 黑 盒 测试 方法 设计 测试 
用 例 。 根 据 系统 的 数据 流 图 , 画 出 对 应 的 程序 功能 图 ;计算 该 程序 功能 图 的 McCabe 复杂 
性 度量 ;给 出 该 程序 功能 图 的 基本 测试 路 径 集合 。 

(3) 分 析 一 C 源 程序 ,参照 QESAT/C 软件 分 析 与 测试 工具 的 规定 , 画 出 程序 中 所 有 
函数 的 控制 流程 图 ;设计 一 组 测试 用 例 , 使 该 程序 所 有 函数 的 语句 获 盖 率 和 分 支 禾 盖 率 尽 
量 达到 最 大 。 


10.8.2 工具 /准备 工作 


在 开始 本 实验 之 前 ,请 认真 阅读 课程 的 相关 内 容 。 
需要 准备 一 台 带 有 浏览 器 ,能 够 访问 因特网 的 计算 机 。 


10. 8.3 实验 内 容 与 步骤 
1) 概念 理解 。 


请 查阅 有 关 资 料 ,根据 你 的 理解 和 看 法 ,给 出 下 列 概念 的 定义 : 
(1) 验收 测试 ， 


(2) 回归 测试 : 


2) 设计 黑 盒 测 试 的 测试 用 例 。 某 图 书 出 租 商店 欲 开发 一 个 租 书信 息 管理 系统 ,管理 
图 书 的 租借 业务 。 该 系统 的 数据 流 图 如 图 10-2 所 示 。 

(1) 根据 系统 的 数据 流 图 ,请 在 一 白 纸 上 画 出 对 应 的 程序 功能 图 ,并 粘贴 于 此 处 ( 相 
关 说 明 请 标注 于 图 上 ) 。 

(提示 : 在 程序 功能 图 中 不 考虑 文件 和 与 文件 交互 的 数据 流 ,并 可 用 状态 和 迁移 来 
描述 。) 


(2) 计算 该 程序 功能 图 的 McCabe 复杂 性 度量 。 
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新 客户 注册 请 求 加 
1 
注册 ] -人 检查 客户 
新 客户 注册 信息 
创建 
检查 库存 最 及 i 
各 信息 文人 客户 世 货 数 复 一 预约 记录 
创建 租借 记录 并 三 还 履行 
计算 租借 费用 本 洒 全 
预约 记录 文件 
图 书信 息 文件 租借 记录 文件 


图 10-2 某 租 书信 息 管理 系统 数据 流 图 


(3) 给 出 该 程序 功能 图 的 基本 测试 路 径 集合 。 
(OY 


© 


(@ 


@ 


3) 已 知 C 源 程序 如 下 : 


/* 功能 : 检查 输入 的 标识 符 是 否 符合 语言 规则 * / 
#include< stdio.h> 
#include< string.h> 
#include< ctype.h> 
#include< conio.h> 
#include< malloc.h> 
char * Islegal (char * CheckWord); 
const int MaxWordLen= 32; 
char * ErrorMessages[]= {/* 错误 信息 列表 * / 
哈 法 !", 哨 字 符 只 能 是 字母 或 下 划 线 !"， 
"党 ,变量 只 能 由 字母 .下划线 和 数字 构成 !"， 
" 常 变量 标识 不 能 用 c 语 言 关键 字 !"， 
"党 ,变量 标识 不 能 用 c 语 言 预 定义 函数 名 ! " ，" 内 存 不 够 !" 
和 
int main () 
{ 
char * Prampt="C 语 言 标 识 符 的 命名 要 遵守 以 下 原则 : "; 
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char * TestWord; 
i 
TestWord= (char* ) malloc (sizeof (char) * MaxWordren)7 
/x* TestWord 存放 用 户 输入 * / 
if (!TestWord) 
retum 1; 
/* 显示 部 分 提示 信息 * / 
Puts (Erompt)7 
for (这 1 i<=4; 计 +) { 
Puts (ErrorMessages[i])7 
} 
while (1) { 
Printf("\n\n 请 输入 一 个 标识 符 (大 写 的 8 退出 ): "); 。 /* 提 示 */ 
Scanf ("% s", TestWord); 
/* 得 到 用 户 输入 * / 
if (toupper) (TestWord[0]))==0) 
break; /* 循 环 出 口 */ 
Printf ("\n% s% s", TestWord, IsLegal (TestWord); 
/* 判定 标识 符 的 合法 性 * / 
} 
free (TestWord); 
retum 0; 
} 
/* 此 函数 检验 标识 符 命名 的 合法 性 x* / 
char * IsLegal (char * CheckWord) 
| 
har * FeyWords[]= { "auto", "Preak", "case", "char", "ontinme", "onst", 
"default", "do", "double", "else", "enum", "extern", "float", "for", 
"goto", "if", “int", "long", “noalias", "register", "retum", 
"short", "signed", "sizeof", "static", "struct", "switch", 
"typedef", "union", "unsigned", "void", "volatile", "while", 
"defined", "define", "undef™, "include", "ifdef", "ifndef", "endif", 
"ine", "error", "elif", "pragra" }; /# C 关 键 字 列表 * / 
char x others=-""; /* "也 可 以 用 于 关键 字 , 但 我 们 不 推荐 您 使 用 !* / 
int wordLength, i; 
char * WordTenp; 
wordIength= strlen (CheckWord) ; 
/* 检查 标识 符 命名 原则 1* / 
证 ((isalpha (CheckWord[0])==0) && (CheckWord[0] !=Others[0])) 
retum ErrorMessages[1]; 
/* 检查 标识 符 命名 原则 2* / 
for (i=0; i<Wordiength; i++) 
if ((isalnm (CheckWord[i]==0) && (CheckWord[i] !=Others[0])) 
retum ErrorMessages [2]; 
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/* 检查 标识 符 命名 原则 3* / 

for (0; i< 44; i++) 

{ 
if (!stramp (CheckWord, KeyWords[i])) 
retum ErrorMessages[3]; 

} 

/* 检查 标识 件 命名 原则 4* / 

for (i=0; i< 69; i++) 

{ 
if (!stram (CheckWord, Functions[i])) 
retum ErrorMessages[4]; 

} 

Teturn ErrorMessages[0]; 

} 


(1) 参照 QESAT/C 软件 分 析 与 测试 工具 的 规定 ,请 在 一 白 纸 上 夯 出 程序 中 所 有 抑 
数 的 控制 流程 图 ,并 粘贴 于 此 处 (相关 说 明 请 标注 于 图 上 )。 


说 明 : 在 历年 全 国 计 算 机 等 级 考试 (四 级 ) 的 软件 测试 工程 师 考试 中 ,第 2 部 分 “论述 
题 ” 中 经 常 出 现 涉及 QESAT/C 软件 测试 工具 的 考试 内 容 。 为 此 ,如 果 要 参加 该 项 考试 , 读 
者 应 参考 历年 相关 考题 的 分 析 , 掌 握 这 类 题目 的 答题 方法 , 受 篇 幅 限 制 本 书 不 做 详细 叙述 。 

QESAT/C(Quality Easy-Software Analysis and Testing/C) 是 北京 航空 航天 大 学 软 
件 工程 研究 所 研制 的 C 软件 分 析 与 测试 工具 , 它 能 帮助 和 分 析 测 试 C 程序 ,支持 理解 程 
序 结构 ,及 时 发 现 程序 中 隐藏 的 问题 ,提高 程序 质量 ,是 在 软件 开发 过 程 中 保证 程序 质量 
的 工具 。 

QESAT/C 软件 的 “考试 工具 学 习 版 "可 在 网 上 下 载 (例如 版 本 2.2. 1,49M)。 

(2) 设计 一 组 测试 用 例 , 使 该 程序 所 有 函数 的 语句 获 盖 率 和 分 支 获 盖 率 尽量 达到 
最 大 。 


_ 
四 
® 
@ 
© 
© 


Sl 


加 
(3) 如 果 认 为 该 程序 的 语句 覆盖 率 或 分 支 覆 盖 率 无 法 达到 100% , 需 说 明 为 什么 。 
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10.8.4 实验 总 结 


10.8.5 实验 评价 (教师 ) 


10.9 阅读 与 分 析 : 再 测试 和 回归 测试 


再 测试 (也 称 确认 测试 ) 是 针对 缺陷 的 修正 所 进行 的 测试 ,用 的 是 发 现 此 缺陷 的 同一 
个 测试 用 例 ,该 测试 用 例 也 可 能 会 进行 适当 的 调整 。 再 测试 的 主要 目的 是 确认 缺陷 的 修 
正 是 有 效 的 。 

回归 测试 是 指 测试 以 前 测试 并 修改 过 的 程序 ,确保 变更 没有 给 软件 其 他 未 变更 部 分 
带 来 新 的 缺陷 。 软 件 修改 后 或 使 用 环境 变更 后 要 执行 回归 测试 。 回 归 测 试 在 整个 软件 测 
试 过 程 中 占有 很 重要 的 地 位 ,是 保证 软件 质量 的 一 个 重要 测试 活动 。 回 归 测 试 可 以 应 用 
在 各 个 测试 级 别 ,如 组 件 测 试 .集成 测试 .系统 测试 和 验收 测试 。 

在 软件 开发 生命 周期 中 的 任何 一 个 阶段 都 可 能 会 发 生 软 件 的 变更 。 软 件 变 更 之 后 都 
需要 开展 相应 的 回归 测试 。 可 能 的 变更 包括 : 

。 缺陷 的 修复 。 

。 版 本 变更 和 升级 (例如 : 增加 了 新 的 功能 或 采用 了 新 的 技术 ) 。 

。 数据 库 的 变更 和 升级 。 

。 软件 使 用 平台 的 变更 和 升级 (例如 : 软件 运行 环境 的 变更 等 ) 。 

在 进行 回归 测试 的 时 候 , 必 须 采 用 合适 的 回归 测试 策略 确定 回归 测试 的 范围 。 这 就 
涉及 回归 测试 用 例 选择 的 策略 。 下 面 是 几 种 常用 的 回归 测试 策略 : 

。 零 回归 测试 : 针对 缺陷 的 修复 ,只 做 确认 测试 , 即 重新 运行 所 有 发 现 缺陷 的 测试 

用 例 ,判断 新 的 软件 版 本 是 否 已 经 修正 了 这 些 缺 陷 。 针 对 新 增 功 能 ,只 运行 所 有 
新 增加 的 功能 测试 用 例 , 用 来 判断 是 否 正确 实现 了 新 的 功能 ,这 是 正常 测试 的 一 
部 分 。 这 种 策略 并 没有 进行 任何 回归 测试 ,所 以 也 称 为 零 回归 测试 。 

。 基于 风险 的 回归 测试 : 是 基于 风险 分 析 而 展开 的 ,这 种 方法 需要 进行 变更 影响 分 

析 。 确 定 变更 如 何 影响 现 有 系统 的 过 程 ,也 称 之 为 影响 分 析 , 它 有 助 于 决定 回归 
测试 的 广度 和 深度 。 回 归 测 试 的 范围 取决 于 变更 影响 分 析 的 结果 。 

。 完全 回归 测试 : 这 个 策略 不 考虑 变更 影响 ,重新 运行 所 有 的 测试 用 例 , 这 是 一 种 
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安全 的 回归 测试 策略 ,遗漏 缺陷 的 风险 最 小 ,但 是 测试 成 本 很 高 。 

零 回归 测试 只 进行 了 很 少 的 测试 ,而 完全 回归 测试 运行 了 所 有 的 测试 用 例 ,它们 在 实 
际 测试 过 程 中 可 能 用 得 都 比较 少 ,因为 零 回归 测试 存在 的 风险 比较 高 ,而 完全 回归 测试 工 
作 量 巨大 。 一 般 来 说 ,基于 风险 的 回归 测试 在 测试 过 程 中 用 得 比较 多 ,由 于 对 软件 变更 进 
行 了 相关 的 影响 分 析 , 测 试 重 点 会 放 在 软件 变更 可 能 会 影响 的 功能 和 模块 上 。 在 平衡 进 
度 、 成 本 和 质量 的 前 提 下 ,尽量 覆盖 风险 高 的 功能 和 模块 ,例如 : 系统 中 增加 了 一 个 新 的 
功能 ,需要 分 析 新 增加 的 功能 对 已 有 系统 的 影响 ,那些 和 新 增加 功能 有 关联 的 其 他 功能 模 
块 是 选择 回归 测试 用 例 的 重点 。 

资料 来 源 : 中 国 IT 实验 室 ,http://softtest. chinaitlab. com/。 
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第 11 章 测试 面向 对 象 应 用 系统 


传统 软件 开发 采用 面向 过 程 、 面 向 功能 的 方法 ,将 程序 系统 模块 化 ,在 此 基础 上 还 可 
以 再 分 成 若干 个 单元 ,这 些 单元 可 以 通过 一 系列 程序 过 程 实现 ,相应 地 产生 了 单元 测试 、 
集成 测试 等 方法 。 面 向 对 象 程序 的 结构 与 传统 的 功能 模块 结构 不 同 , 它 将 开发 分 为 面向 
对 象 分 析 (OOA) \ 面 向 对 象 设计 (OOD) 和 面向 对 象 编程 (OOP) 三 个 阶段 。 分 析 阶 段 产 
生 整 个 问题 空间 的 抽象 描述 ,在 此 基础 上 ,进一步 归纳 出 适用 于 面向 对 象 编程 语言 的 类 和 
类 结构 ,最 后 形成 代码 , 即 : 面向 对 象 (0O) 软 件 的 体系 结构 是 包含 协作 类 的 一 系列 分 层 
的 子 系统 ,这 些 系 统 的 每 个 元 素 ( 子 系统 和 类 ) 都 执行 帮助 完成 系统 需求 的 功能 。 因 此 , 针 
对 面向 对 象 软件 的 开发 特点 ,其 测试 方法 和 技术 也 必然 要 做 相应 的 改变 ,从 而 形成 面向 对 
象 的 测试 模型 ,测试 的 层次 与 数据 流 、 面 向 对 象 的 单元 和 集成 测试 方法 等 。 有 必要 在 各 种 
不 同 的 层次 上 测试 面向 对 象 系统 ,尽力 发 现 当 类 之 间 协 作 以 及 子 系统 穿越 体系 结构 层 通 
信 时 可 能 发 生 的 错误 。 

可 以 断定 ,由 于 可 复 用 类 库 规模 的 增 大 ,更 多 的 复 用 会 缓解 对 面向 对 象 系统 进行 繁重 
测试 的 需求 。 确 切 地 说 ,相反 的 情况 的 确 是 存在 的 。Binder 在 讨论 这 种 情况 时 说 道 : 


每 次 复 用 都 是 一 种 新 的 使 用 环境 ,重新 测试 需要 谨慎 。 为 了 在 面向 对 象 系统 中 获得 
高 可 靠 性 ,似乎 需要 更 多 的 测试 ,而 不 是 更 少 的 测试 。 


为 了 充分 测试 面向 对 象 的 系统 ,必须 做 3 件 事情 : 

(1) 对 测试 的 定义 进行 扩展 ,使 其 包括 应 用 于 面向 对 象 分 析 和 设计 模型 的 错误 发 现 
技术 ; 

(2) 单元 测试 和 集成 测试 策略 必须 彻底 改变 ; 

(3) 测试 用 例 设计 必须 考虑 面向 对 象 软件 的 独特 性 质 。 


11.1 扩展 测试 的 视野 


面向 对 象 软件 的 构造 开始 于 需求 (分 析 ) 和 设计 模型 的 创建 。 由 于 面向 对 象 软件 工程 
模式 的 进化 特性 ,这 些 模 型 开始 于 系统 需求 的 不 太 正 式 的 表示 ,并 进化 到 更 详细 的 类 模 
型 .类 关系 ,系统 设计 和 分 配 以 及 对 象 设计 (通过 消息 传递 合并 对 象 连接 模型 ) 。 在 每 一 个 
阶段 ,都 要 对 模型 进行 “测试 ,尽量 在 错误 传播 到 下 一 轮 迭 代 之 前 发 现 错误 。 

可 以 肯定 ,面向 对 象 分 析 和 设计 模型 的 评审 非常 有 用 ,因为 相同 的 语义 结构 (例如 ， 
类 属性、 操作、 消息 ) 出 现在 分 析 、 设 计 和 代码 层次 。 因 此 ,在 分 析 期 间 所 发 现 的 类 属性 的 
定义 问题 会 防止 副作用 的 发 生 。 如 果 问 题 直 到 设计 或 编码 阶段 (或 者 是 分 析 的 下 一 轮 选 
代 ) 还 没有 发 现 ,副作用 就 会 发 生 。 
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例如 ,在 分 析 的 第 一 轮 迁 代 中 ,考虑 定义 了 很 多 属性 的 一 个 类 。 由 于 对 问题 域 的 错误 
理解 ,一 个 无 关 的 属性 被 扩展 到 类 中 ,然后 指定 了 两 个 操作 来 处 理 此 属性 。 分 析 模 型 进行 
了 评审 ,领域 专家 指出 了 这 个 问题 。 在 这 个 阶段 去 除 无 关 的 属性 ,可 以 在 分 析 阶 段 避免 下 
面 的 问题 和 不 必要 的 工作 量 。 

(1) 可 能 会 生成 特殊 的 子 类 ,以 适应 不 必要 的 属性 或 例外 。 去 除 无 关 的 属性 后 ,与 创 
建 不 必要 的 子 类 所 相关 的 工作 可 以 避免 。 

(2) 类 定义 的 错误 解释 可 能 导致 不 正确 或 多 余 的 类 关系 。 

(3) 为 了 适应 无 关 的 属性 ,系统 的 行为 或 类 可 能 被 赋予 不 适当 的 特性 。 

如 果 问 题 没有 在 分 析 期 间 被 发 现 并 进一步 传播 ,在 设计 期 间 会 发 生 以 下 问题 (早期 的 
评审 可 以 避免 这 些 问 题 的 发 生 ): 

(1) 在 系统 设计 期 间 , 可 能 会 发 生 将 类 错误 地 分 配给 子 系统 和 (或 ) 任 务 的 情况 。 

(2) 可 能 会 扩展 不 必要 的 设计 工作 ,为 涉及 无 关 属 性 的 操作 创建 过 程 设 计 。 

(3) 消息 模型 可 能 不 正确 (因为 会 为 无 关 的 操作 设计 消息 ) 。 

如 果 问 题 没有 在 设计 期 间 检测 出 来 ,并 传递 到 了 编码 活动 中 ,将 增加 可 观 的 工作 量 生 
成 代码 ,实现 不 必要 的 属性 \ 两 个 不 必要 的 操作 、 驱 动 对 象 间 通 信 的 消息 以 及 很 多 其 他 相 
关 的 问题 。 另 外 ,类 的 测试 会 消耗 更 多 不 必要 的 时 间 。 一 旦 最 终 发 现 了 这 个 问题 ,对 系统 
执行 修改 ,又 将 出 现 由 变更 所 引起 的 潜在 副作用 。 

在 开发 的 后 期 ,面向 对 象 分 析 (OOA) 和 面向 对 象 设计 (OOD) 模 型 提供 了 有 关系 统 结 
构 和 行为 的 实质 性 信息 。 因 此 ,在 代码 生成 之 前 ,需要 对 这 些 模 型 进行 严格 地 评审 。 

应 该 在 模型 的 语法 、 语 义 和 语 用 方面 对 所 有 的 面向 对 象 模型 进行 正确 性 .完整 性 和 一 
致 性 测试 (包括 技术 评审 ) 。 


11.2 测试 OOA 和 OOD 模型 


不 能 在 传统 意义 上 对 分 析 和 设计 模型 进行 测试 ,因为 这 些 模型 是 不 能 运行 的 。 然 而 ， 
可 以 使 用 技术 评审 方法 检查 模型 的 正确 性 和 一 致 性 。 


11.2.1 OOA 和 OOD 模型 的 正确 性 


用 于 表示 分 析 和 设计 模型 的 符号 和 语法 是 与 为 项 目 所 选择 的 特定 分 析 和 设计 方法 连 
接 在 一 起 的 。 由 于 语法 的 正确 性 是 基于 符号 表示 的 正确 使 用 来 判断 的 ,必须 对 每 个 模型 
进行 评审 以 确保 维持 了 正确 的 建 模 习惯 。 

在 分 析 和 设计 期 间 , 可 以 根据 模型 是 否 符合 真实 世界 的 问题 域 来 评估 模型 的 语义 正 
确 性 。 如 果 模 型 准确 地 反映 了 真实 世界 (详细 程度 与 模型 被 评审 的 开发 阶段 相 适应 ), 则 
在 语义 上 是 正确 的 。 实 际 上 ,为 了 确定 模型 是 否 反映 了 真实 世界 的 需求 ,应 该 将 其 介绍 给 
问题 领域 的 专家 ,由 专家 检查 类 定义 和 层次 中 遗漏 和 不 清楚 的 地 方 。 要 对 类 关系 (实例 连 
接 ) 进 行 评估 ,确定 这 些 关系 是 否 准确 地 反映 了 真实 世界 的 对 象 连接 。 对 于 面向 对 象 系 
统 , 在 对 照 真 实 世界 的 使 用 场景 追踪 分 析 和 设计 模型 方面 用 例 是 非常 有 价值 的 。 
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11.2.2 面向 对 象 模型 的 一 致 性 


面向 对 象 模型 的 一 致 性 可 以 通过 这 样 的 方法 来 判断 :“ 考 虑 模型 中 实体 之 间 的 关系 。 
不 一 致 的 分 析 模 型 或 设计 模型 在 一 部 分 中 的 表示 没有 正确 地 反映 到 模型 的 其 他 部 分 ”。 

为 了 评估 一 致 性 ,应 该 检查 每 个 类 及 与 其 他 类 的 连接 。 可 以 使 用 类 -责任 -协作 
(class-responsibility-collaboration,CRC) 模 型 或 对 象 - 关 系 图 来 辅助 此 活动 。CRC 模型 
由 CRC 索引 卡片 组 成 ,每 张 CRC 卡片 都 列 出 了 类 的 名 称 、 责 任 ( 操 作 ) 和 协作 者 (接收 其 
消息 的 其 他 类 及 完成 其 责任 所 依赖 的 其 他 类 )。 协 作 意 味 着 面向 对 象 系统 的 类 之 间 的 一 
系列 关系 ( 即 连接 ) 。 对 象 关 系 模型 提供 了 类 之 间 连 接 的 图 形 表示 ,这 些 信息 都 可 以 从 分 
析 模 型 中 获得 。 

推荐 使 用 下 面 的 步 又 对 类 模型 进行 评估 : 

(1) 检查 CRC 模型 和 对 象 -关系 模型 。 对 这 两 个 模型 做 交叉 检查 ,确保 需求 模型 所 
蕴含 的 所 有 协作 都 正确 地 反映 在 了 这 两 个 模型 中 。 

(2) 检查 每 一 张 CRC 索引 卡片 的 描述 以 确定 委托 责任 是 定义 协作 者 的 一 部 分 。 例 
如 ,考虑 为 销售 积分 结账 系统 定义 的 类 , 称 为 CreditSale, 这 个 类 的 CRC 索引 卡片 如 
图 11-1 所 示 。 


类 的 名 称 : CreditSale 
类 的 类 型 : 交易 事件 
类 的 特性 nontangible, atomic, sequential, permanent, guarded 
责任 : 协作 者 : 
[IF | 从 二 下 
[取得 授权 ”| 信用 权利 
显示 购物 金额 产品 票 
| 
审计 文件 
生成 账单 账单 


11-1 用 于 评审 的 CRC 索引 卡片 实例 


对 于 这 组 类 和 协作 ,如 果 将 责任 (例如 , 读 信用 卡 ) 委 托 给 已 命名 的 协作 者 
(CreditCard) ,看 看 此 协作 者 是 否 完成 了 这 项 责任 。 也 就 是 说 ,类 CreditCard 是 否 具有 读 
卡 操 作 。 在 此 实例 中 回答 是 肯定 的 。 遍 历 对 象 -关系 模型 ,确保 所 有 此 类 连接 都 是 有 
效 的 。 

(3) 反 转 连接 ,确保 每 个 提供 服务 的 协作 者 都 从 合理 的 地 方 收 到 请 求 。 例 如 ,如 果 
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CreditCard 类 收 到 了 来 自 CreditSale 类 的 请 求 purchase amount, 就 有 问题 了 。 
CreditCard 不 知道 购物 金额 是 多 少 。 

(4) 使 用 步骤 (3) 中 反 转 后 的 连接 ,确定 是 否 真正 需要 其 他 类 ,或 者 责任 在 类 之 间 的 
组 织 是 否 合适 。 

(5) 确定 是 否 可 以 将 广泛 请 求 的 多 个 责任 组 合 为 一 个 责任 。 例 如 , 读 信用 卡 和 取得 
授权 在 每 一 种 情形 下 都 会 发 生 ,可 以 将 这 两 个 责任 组 合 为 验证 信用 请 求 (validate credit 
request) 责 任 , 此 责任 包括 取得 信用 卡号 和 取得 授权 。 

可 以 将 步骤 (1) 到 步骤 (5) 反 复 应 用 到 每 个 类 及 需求 模型 的 每 一 次 评估 中 。 

一 旦 创建 了 设计 模型 ,就 可 以 进行 系统 设计 和 对 象 设计 的 评审 了 。 系 统 设计 描述 总 
体 的 产品 体系 结构 、 组 成 产品 的 子 系统 、 将 子 系统 分 配给 处 理 器 的 方式 ,将 类 分 配给 子 系 
统 的 方式 以 及 用 户 界 面 的 设计 。 对 象 模型 描述 每 个 类 的 细节 以 及 实现 类 之 间 的 协作 所 必 
需 的 消息 传送 活动 。 

系统 设计 评审 是 这 样 进行 的 : 检查 面向 对 象 分 析 期 间 所 开发 的 对 象 -行为 模型 ,并 将 
所 需要 的 系统 行为 映射 到 为 完成 此 行为 而 设计 的 子 系统 上 。 在 系统 行为 的 范畴 内 也 要 对 
并 发 和 任务 分 配 进行 评审 。 对 系统 的 行为 状态 进行 评估 以 确定 并 发 行为 。 使 用 用 例 进行 
用 户 界 面 设 计 。 

对 照 对 象 -关系 网 检查 对 象 模 型 ,确保 所 有 的 设计 对 象 包括 必要 的 属性 和 操作 ,以 实 
现 为 每 个 CRC 索引 卡片 所 定义 的 协作 。 另 外 ,要 对 操作 细节 的 详细 规格 说 明 ( 即 实现 操 
作 的 算法 ) 进 行 评审 。 


11.3 面向 对 象 测试 策略 


经 典 的 软件 测试 策略 从 “小 范围 开始 ,并 逐步 过 渡 到 “软件 整体 *"。 用 软件 测试 的 行 
话 来 说 ,就 是 先 从 单元 测试 开始 ,然后 过 渡 到 集成 测试 ,并 以 确认 测试 和 系统 测试 结束 。 
在 传统 的 应 用 系统 中 ,单元 测试 关注 最 小 的 可 编译 程序 单元 一 一 子 程序 (例如 ,构件 、 模 
块 . 子 程序 ,程序 )。 一 旦 完成 了 一 个 单元 的 单独 测试 ,就 将 其 集成 到 程序 结构 中 ,并 进行 
一 系列 的 回归 测试 ,以 发 现 模块 的 接口 错误 及 由 于 加 入 新 模块 所 引发 的 副作用 。 最 后 ,将 
系统 作为 一 个 整体 进行 测试 ,确保 发 现 需求 方面 的 错误 。 


11.3.1 面向 对 象 环境 中 的 单元 测试 


在 OO 软件 中 ,最 小 的 可 测试 “单元 ”是 类 ,类 测试 是 由 封装 在 类 中 的 操作 和 类 的 状态 
行为 驱动 的 。 

当 考 虑 面向 对 象 软件 时 ,单元 的 概念 发 生 了 变化 。 封 装 是 类 和 对 象 定义 的 驱动 力 ,也 
就 是 说 ,每 个 类 和 类 的 每 个 实例 (对 象 ) 包 装 了 属性 (数据 ) 和 操纵 这 些 数据 的 操作 (也 称 为 
方法 或 服务 ) 。 最 小 的 可 测试 单元 是 封装 了 的 类 ,而 不 是 单独 的 模块 。 由 于 一 个 类 可 以 包 
括 很 多 不 同 的 操作 ,并 且 一 个 特定 的 操作 又 可 以 是 很 多 不 同类 的 一 部 分 ,因此 ,单元 测试 
的 含义 发 生 了 巨大 的 变化 。 
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我 们 已 经 不 可 能 再 独立 地 测试 单一 的 操作 了 (独立 地 测试 单一 的 操作 是 单元 测试 的 
传统 观点 ) ,而 是 要 作为 类 的 一 部 分 进行 测试 。 例 如 ,考虑 在 一 个 类 层次 中 ,为 超 类 定义 了 
操作 X() ,并 且 很 多 子 类 继承 了 此 操作 。 每 个 子 类 都 使 用 操作 XO ,但 是 此 操作 是 在 为 每 
个 子 类 所 定义 的 私有 属性 和 操作 的 环境 中 应 用 的 。 由 于 使 用 操作 X() 的 环境 具有 微妙 的 
差异 ,因此 ,有 必要 在 每 个 子 类 的 环境 中 测试 操作 X()。 这 就 意味 着 在 真空 中 测试 操作 X() 
(传统 的 单元 测试 方法 ) 在 面向 对 象 的 环境 中 是 无 效 的 。 

面向 对 象 软件 的 类 测试 等 同 于 传统 软件 的 单元 测试 ,但 传统 软件 的 单元 测试 倾向 于 
关注 模块 的 算法 细节 和 流 经 模块 接口 的 数据 ,而 面向 对 象 软件 的 类 测试 由 封装 在 类 中 的 
操作 和 类 的 状态 行为 驱动 。 


11.3.2 面向 对 象 环境 中 的 集成 测试 


由 于 面向 对 象 软件 不 具有 层次 控制 结构 ,因此 传统 的 自 顶 向 下 和 自 底 向 上 的 集成 策 
略 没有 意义 。 另 外 ,由 于 * 组 成 类 的 构件 之 间 的 直接 和 非 直接 的 交互 ”每 次 将 一 个 操作 集 
成 到 类 中 通常 是 不 可 能 的 。 

面向 对 象 系统 的 集成 测试 有 两 种 不 同 的 策略 。 第 一 种 集成 策略 是 基于 线程 的 测试 ， 
将 响应 系统 的 一 个 输入 或 一 个 事件 所 需要 的 一 组 类 集成 到 一 起 。 每 个 线程 单独 集成 和 测 
试 , 并 应 用 回归 测试 确保 不 产生 副作用 。 第 二 种 集成 策略 是 基于 使 用 的 测试 ,通过 测试 那 
些 很 少 使 用 服务 器 类 的 类 ( 称 为 独立 类 ) 开 始 系统 的 构造 。 测 试 完 独立 类 之 后 ,测试 使 用 
独立 类 的 下 一 层 类 ( 称 为 依赖 类 )。 按 照 这 样 的 顺序 逐 层 测试 依赖 类 ,直到 整个 系统 构造 
完成 。 与 传统 集成 不 同 ,在 可 能 的 情况 下 ,这 种 策略 避免 了 作为 蔡 换 操作 的 驱动 模块 和 桩 
模块 的 使 用 。 

徐 测 试 是 面向 对 象 软件 集成 测试 中 的 一 个 步 又。 通过 设计 试图 发 现 协作 错误 的 测试 
用 例 , 对 一 簇 协作 类 (通过 检查 CRC 和 对 象 -关系 模型 来 确定 ) 进 行 测试 。 


11.3.3 面向 对 象 环 境 中 的 确认 测试 


在 确认 级 或 系统 级 ,类 连接 的 细节 消失 了 。 如 传统 的 确认 方法 一 样 ,面向 对 象 软件 的 
确认 关注 用 户 可 见 的 动作 和 用 户 可 以 辨别 的 来 自 系统 的 输出 。 为 了 辅助 确认 测试 的 导 
出 ,测试 人 员 应 该 拟定 出 用 例 , 用 例 是 需求 模型 的 一 部 分 ,提供 了 最 有 可 能 发 现 用 户 交互 
需求 方面 错误 的 场景 。 

传统 的 黑 盒 测 试 方法 可 用 于 驱动 确认 测试 。 另 外 ,测试 人 员 可 以 选择 从 对 象 -行为 模 
型 导出 测试 用 例 ,也 可 以 从 创建 的 事件 流 图 (OOA 的 一 部 分 ) 导 出 测试 用 例 。 


11.4 面向 对 象 测试 方法 


面向 对 象 体系 结构 导致 封装 了 协作 类 的 一 系列 分 层 子 系统 的 产生 。 每 个 系统 成 分 
( 子 系统 和 类 ) 完 成 有 助 于 满足 系统 需求 的 功能 。 有 必要 在 不 同 的 层次 上 测试 面向 对 象 系 
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统 , 以 发 现 错误 。 在 类 相互 协作 以 及 子 系统 穿越 体系 结构 层 通信 时 可 能 出 现 这 些 错误 。 

面向 对 象 软件 的 测试 用 例 设计 方法 还 在 不 断 改 进 .其 总 体 方法 可 以 是 : 

(1) 每 个 测试 用 例 都 应 该 唯一 地 标识 ,并 明确 地 与 被 测试 的 类 相关 联 。 

(2) 应 该 叙述 测试 的 目的 。 

(3) 应 该 为 每 个 测试 开发 测试 步骤 ,并 包括 以 下 内 容 : 

将 要 测试 的 类 的 指定 状态 列表 。 

@ 作为 测试 结果 要 进行 检查 的 消息 和 操作 列表 。 

@ 对 类 进行 测试 时 可 能 发 生 的 异常 列表 。 

@ 外 部 条 件 列表 ( 即 软件 外 部 环境 的 变更 ,为 了 正确 地 进行 测试 ,这 种 环境 必须 
存在 )。 

@ 有 助 于 理解 或 实现 测试 的 补充 信息 。 

面向 对 象 测 试 与 传统 的 测试 用 例 设计 是 不 同 的 ,传统 的 测试 用 例 是 通过 软件 的 输入 - 
处 理 -输出 视图 或 单个 模块 的 算法 细节 来 设计 的 ,而 面向 对 象 测试 侧重 于 设计 适当 的 操作 
序列 以 检查 类 的 状态 。 


11.4.1 面向 对 象 概念 的 测试 用 例 设 计 的 含义 


类 经 过 分 析 模 型 到 设计 模型 的 演变 ,成 为 测试 用 例 设 计 的 目标 。 由 于 操作 和 属性 是 
封装 的 ,从 类 的 外 面 测试 操作 通常 是 徒劳 的 。 尽 管 封 装 是 面向 对 象 的 重要 设计 概念 ,但 它 
可 能 成 为 测试 的 一 个 小 障碍 。 如 Binder 所 述 :“ 测 试 需要 报告 对 象 的 具体 状态 和 抽象 状 
态 ”。 然 而 ,封装 使 获取 这 些 信息 有 些 困难 ,除非 提供 内 置 操作 来 报告 类 的 属性 值 , 和 否则 ， 
可 能 很 难 获得 一 个 对 象 的 状态 快照 。 

继承 也 为 测试 用 例 设计 提出 了 额外 的 挑战 。 注 意 到 ,即使 已 取得 复 用 ,每 个 新 的 使 用 
环境 也 需要 重新 测试 。 另 外 ,由 于 增加 了 所 需 测试 环境 的 数量 ,多 重 继承 使 测试 进一步 复 
杂 化 。 若 将 从 超 类 派生 的 子 类 实例 用 于 相同 的 问题 域 , 则 当 测试 子 类 时 ,使 用 超 类 中 生成 
的 测试 用 例 集 是 可 能 的 。 然 而 ,车 子 类 用 在 一 个 完全 不 同 的 环境 中 , 则 超 类 的 测试 用 例 将 
具有 很 小 的 可 应 用 性 ,因而 必须 设计 新 的 测试 用 例 集 。 


11.4.2 传统 测试 用 例 设 计 方 法 的 可 应 用 性 


白 盒 测试 方法 可 以 应 用 于 类 中 定义 的 操作 。 基 本 路 径 、 循 环 测试 或 数据 流 技 术 有 助 
于 确保 一 个 操作 中 的 每 条 语句 都 测试 到 。 然 而 ,许多 类 操作 的 简洁 结构 使 某 些 人 认为 : 
用 于 白 盒 测试 的 工作 投入 最 好 直接 用 于 类 层次 的 测试 。 

与 利用 传统 的 软件 工程 方法 所 开发 的 系统 一 样 , 黑 盒 测试 方法 也 适用 于 面向 对 象 系 
统 。 用 例 可 为 黑 盒 测 试 和 基于 状态 的 测试 设计 提供 有 用 的 输入 。 
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11.4.3 基于 故障 的 测试 


基于 故障 的 测试 策略 是 假设 一 组 似乎 可 能 出 现 的 故障 ,然后 导出 测试 去 证 明 每 个 
假设 。 

在 面向 对 象 系统 中 ,基于 故障 测试 的 目标 是 设计 测试 ,所 设计 的 测试 最 有 可 能 发 现 似 
乎 可 能 出 现 的 故障 ( 称 为 似 然 故 障 ) 。 由 于 产品 或 系统 必须 符合 客户 需求 ,完成 基于 故障 
的 测试 所 需 的 初步 计划 是 从 分 析 模 型 开始 的 。 测 试 人 员 查找 似 然 故 障 ( 即 系统 的 实现 有 
可 能 产生 错误 的 方面 ) ,为 了 确定 这 些 故障 是 否 存在 ,需要 设计 测试 用 例 以 检查 设计 或 
代码 。 

当然 ,这 些 技术 的 有 效 性 依赖 于 测试 人 员 如 何 理解 似 然 故 障 。 若 在 面向 对 象 系统 中 
真正 的 故障 被 理解 为 “没有 道理 "的, 则 这 种 方法 实际 上 并 不 比 任何 随机 测试 技术 好 。 然 
而 , 若 分 析 模型 和 设计 模型 可 以 洞察 有 可 能 出 错 的 事物 , 则 基于 故障 的 测试 可 以 花费 相当 
少 的 工作 量 而 发 现 大 量 的 错误 。 

集成 测试 寻找 的 是 操作 调用 或 信息 连接 中 的 似 然 错误 。 在 这 种 环境 下 ,可 以 发 现 3 
种 错误 : 非 预 期 的 结果 、 使 用 了 错误 的 操作 /消息 以 及 不 正确 的 调用 。 为 确定 函数 (操作 ) 
调用 时 的 似 然 故 障 ,必须 检查 操作 的 行为 。 

集成 测试 适用 于 属性 ,同样 也 适用 于 操作 。 对 象 的 “行为 ”通过 赋予 属性 值 来 定义 。 
测试 应 该 检查 属性 以 确定 不 同类 型 的 对 象 行为 是 否 存 在 合适 的 值 。 

集成 测试 试图 发 现 用 户 对 象 而 不 是 服务 对 象 中 的 错误 ,注意 到 这 一 点 很 重要 。 用 传 
统 的 术语 来 说 ,集成 测试 的 重点 是 确定 调用 代码 而 不 是 被 调用 代码 中 是 否 存 在 错误 。 利 
用 操作 调用 为 线索 ,是 检查 调用 代码 的 测试 需求 的 一 种 方式 。 


11.4.4 测试 用 例 与 类 层次 


继承 并 不 能 排除 对 所 有 派生 类 进行 全 面 测试 的 需要 。 事 实 上 , 它 确实 使 测试 过 程 更 
复杂 。 考 虑 下 列 情形 ,类 Base 包含 了 操作 inherited() 和 redefined() ,类 Derived 重 定义 
了 redefined() 以 用 于 某 个 局 部 环境 中 。 毫 无 疑问 ,必须 对 此 进行 测试 ,因为 它 表示 的 是 
新 设计 和 新 代码 。 但 是 ,Derived: : redefined() 需 要 重新 测试 吗 ? 

车 Derived:: inherited ( ) 调 用 redefined(), 而 redefined() 的 行为 已 经 发 生变 化 ， 
Derived: :inherited() 可 能 会 误 用 这 个 新 行为 ,因此 ,尽管 设计 与 代码 没有 发 生变 化 ,还 是 
需要 对 它 进行 新 的 测试 。 然 而 ,重要 的 是 要 注意 ,只 需要 执行 Derived::inherited() 所 有 
测试 的 一 个 子 集 。 若 inherited() 的 部 分 设计 和 代码 不 依赖 于 redefined()( 即 不 调用 它 ， 
也 不 间接 调用 它 ), 则 不 需要 重新 测试 派生 类 中 的 代码 。 

Base: :redefined() 和 Derived: :redefined() 是 具有 不 同 规格 说 明和 实现 的 两 个 不 同 
操作 。 它 们 各 自 有 一 组 从 其 规格 说 明和 实现 中 生成 的 测试 需求 。 那 些 测试 需求 探查 似 然 
故障 : 集成 故障 、 条 件 故 障 、 边 界 故 障 等 。 但 操作 有 可 能 是 类 似 的 ,它们 的 测试 需求 集 将 
重 倒 。 面 向 对 象 设计 得 越 好 , 重 倒 就 越 多 。 仅 需要 针对 Base:: redefined() 测 试 不 能 满足 
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的 那些 Derived: :redefined() 需 求生 成 新 的 测试 。 
总 之 ,Base: :redefined() 测 试 可 应 用 于 类 Derived 的 对 象 。 测 试 输入 可 能 同时 适用 
于 基 类 和 派生 类 ,但 是 ,预期 的 结果 在 派生 类 中 可 能 有 所 不 同 。 


11.4.5 基于 场景 的 测试 设计 


基于 故障 的 测试 忽略 了 两 种 主要 类 型 的 错误 : 不 正确 的 规格 说 明 ; @ 子 系统 间 交 
互 。 当 出 现 了 与 不 正确 的 规格 说 明 相关 的 错误 时 ,产品 并 不 做 客户 希望 的 事情 , 它 有 可 能 
做 错误 的 事情 或 漏 掉 重要 的 功能 。 但 是 ,在 这 两 种 情况 下 ,质量 (对 需求 的 符合 性 ) 均 受到 
损害 。 当 一 个 子 系统 的 行为 创建 的 环境 (例如 ,事件 .数据 流 ) 使 另 一 个 子 系统 失效 时 , 则 
出 现 了 与 子 系统 交互 相关 的 错误 。 

基于 场景 的 测试 关心 用 户 做 什么 ,而 不 是 产品 做 什么 。 这 意味 着 捕获 用 户 必须 完成 
的 任务 (通过 用 例 ) ,然后 在 测试 时 使 用 它们 及 其 变 体 。 

场景 可 以 发 现 交互 错误 。 为 了 达到 这 个 目标 ,测试 用 例 必 须 比 基于 故障 的 测试 更 复 
杂 且 更 切合 实际 。 基 于 场景 的 测试 倾向 于 用 单一 测试 检查 多 个 子 系统 (用 户 并 不 限制 自 
己 一 次 只 用 一 个 子 系统 ) 。 

作为 一 个 例子 ,通过 审查 下 面 的 用 例 ,考虑 设计 文本 编辑 器 的 基于 场景 的 测试 。 


用 例 : 修改 最 终 草稿 


背景 : 人 们 经 常 碰 到 以 下 情景 : 打印 “最终 ?草稿 ,阅读 它 , 却 发 现 了 一 些 屏幕 上 不 易 
察觉 的 恼人 错误 。 该 用 例 描 述 了 当 这 种 情况 发 生 时 出 现 的 事件 序列 : 

(1) 打印 整个 文档 

(2) 翻动 文档 ,修改 某 些 页 ; 

(3) 打印 修改 的 每 一 页 ; 

(4) 有 时 打印 多 页 。 

这 个 场景 描述 了 两 件 事情 : 一 个 测试 和 特定 的 用 户 需 要 。 用 户 的 需要 是 明显 的 : 
四 打印 单 页 的 方法 ; @ 打 印 多 页 的 方法 。 至 于 测试 ,需要 在 打印 后 测试 编辑 (以 及 编辑 后 
测试 打印 )。 因 此 ,测试 人 员 需 要 设计 测试 ,以 发 现 由 打印 功能 引起 的 编辑 功能 的 错误 。 
也 就 是 说 ,这 样 的 错误 说 明 两 个 软件 功能 不 是 完全 独立 的 。 


用 例 : 打印 一 个 新 副本 


背景 : 某 人 向 用 户 要 文档 的 一 个 新 副本 ,必须 打印 。 

(1) 打开 文档 ; 

(2) 打印 文档 ; 

(3) 关闭 文档 。 

另外 ,这 种 测试 方法 是 相当 明显 的 ,除非 文档 突然 消失 。 它 是 在 一 个 早期 的 任务 中 创 
建 的 ,那个 任务 对 这 个 任务 有 影响 吗 ? 

在 很 多 编辑 器 中 ,文档 记 住 最 后 一 次 打印 时 的 状况 。 缺 省 情况 下 ,下 一 次 用 相同 的 方 
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式 打 印 。 在 “修改 最 终 草稿 "场景 之 后 ,只 需要 选择 菜单 中 的 “打印 ”, 单 击 对 话 框 的 “打印 ” 
按钮 ,就 会 使 上 次 改正 过 的 页 面 再 打印 一 次 。 这 样 , 根 据 编 辑 器 ,正确 的 场景 应 该 如 下 : 


用 例 : 打印 一 个 新 副本 


(1) 打开 文档 ; 

(2) 在 菜单 中 选择 “打印 ”; 

(3) 检查 是 否 将 连续 打印 若干 页 ,如 果 是 , 单 击 以 打印 整个 文档 ; 

(4) 单 击 “ 打 印 ” 按 钮 ; 

(5) 关闭 文档 。 

但 是 ,这 个 场景 指明 了 一 个 潜在 的 规格 说 明 错 误 。 编 辑 器 没有 做 用 户 合理 期 望 它 做 
的 事情 。 用 户 经 常 忽 略 了 对 上 面 第 (3) 步 的 检查 。 当 他 们 走 到 打印 机 前 ,发 现 只 有 一 页 ， 
而 他 们 要 100 页 ,这 使 他 们 感到 恼火 。 生 气 的 用 户 会 报告 规格 说 明 错 误 。 

测试 用 例 设 计 者 可 能 忽略 了 测试 用 例 设 计 中 的 这 种 依赖 性 ,但 是 ,测试 期 间 这 种 问题 
有 可 能 出 现 。 测 试 人 员 则 必须 应 对 可 能 的 反应 :“ 这 就 是 它 工 作 的 本 来 方式 !” 


11.4.6 表层 结构 和 深层 结构 的 测试 


表层 结构 是 指 面向 对 象 程序 的 外 部 可 观察 结构 , 即 对 最 终 用 户 是 显而易见 的 结构 。 
许多 面向 对 象 系统 用 户 可 能 不 是 完成 某 个 功能 ,而 是 得 到 以 某 种 方式 操纵 的 对 象 。 但 是 ， 
无 论 是 什么 界面 ,测试 仍然 是 基于 用 户 任 务 进行 的 。 捕 提 这 些 任务 涉及 理解 、 观 察 以 及 与 
有 代表 性 的 用 户 ( 很 多 非 代 表 性 的 用 户 也 值得 考虑 ) 进 行 交谈 。 

细节 上 确实 存在 某 些 差异 ,例如 ,在 使 用 面向 命令 界面 的 传统 系统 中 ,用 户 可 以 使 用 
所 有 命令 列表 作为 测试 检查 表 。 若 没有 测试 场景 检查 某 个 命令 ,测试 有 可 能 忽略 某 些 用 
户 任务 (或 具有 无 用 命令 的 界面 )。 在 基于 对 象 的 界面 中 ,测试 人 员 可 以 使 用 所 有 的 对 象 
列表 作为 测试 检查 表 。 

当 设 计 人 员 以 一 种 新 的 或 非 传 统 的 方式 看 待 系统 时 , 则 可 以 设计 出 最 好 的 测试 。 例 
如 , 若 系统 或 产品 有 基于 命令 行 的 界面 ,测试 用 例 设计 人 员 假 设 操作 是 与 对 象 无 关 的 , 则 
可 以 设计 更 彻底 的 测试 。 问 一 些 这 样 的 问题 :“ 当 用 打印 机 时 ,用 户 希 望 使 用 这 个 操作 
(〈 仅 用 于 * 扫 描 仪 ?' 对 象 ) 吗 ?” 不 管 界面 风格 怎样 ,检查 表层 结构 的 测试 用 例 设 计 应 该 使 用 
对 象 和 操作 为 线索 导向 被 忽视 的 任务 。 

深层 结构 是 指 面向 对 象 程序 的 内 部 技术 细节 , 即 通 过 检查 设计 和 (或 ) 代 码 来 理解 的 
数据 结构 。 设 计 深层 结构 测试 来 检查 面向 对 象 软件 设计 模型 中 的 依赖 关系 、 行 为 和 通信 
机 制 。 

需求 模型 和 设计 模型 可 用 来 作为 深层 结构 测试 的 基础 。 例 如 ,UML 协作 图 或 部 署 
模型 描述 了 对 象 和 子 系统 间 对 外 不 可 见 的 协作 关系 。 那 么 测试 用 例 设计 者 会 问 : 我 们 是 
否 已 经 捕获 了 (作为 测试 的 ) 某 些 任 务 来 测试 协作 图 中 记录 的 协作 ? 若 没 有 ,为 什么 没有 ? 
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11.5 类 级 可 应 用 的 测试 方法 


“小 范围 ?测试 侧重 于 单个 类 及 该 类 封装 的 方法 。 面 向 对 象 测试 期 间 , 随 机 测试 和 分 
割 是 用 于 检查 类 的 测试 方法 。 


11.5.1 面向 对 象 类 的 随机 测试 


为 提供 这 些 方法 的 简要 说 明 , 考 虑 一 个 银行 应 用 ,其 中 Account 类 有 下 列 操作 : open()、 
setup() .deposit()、withdraw()、balance()、summarize()、creditLimit() 和 close()。 其 
中 ,每 个 操作 均 可 应 用 于 Account 类 ,但 问题 的 本 质 隐 含 了 一 些 限制 (例如 ,账号 必须 在 其 
他 操作 可 应 用 之 前 打开 ,在 所 有 操作 完成 之 后 关闭 )。 即 使 有 了 这 些 限制 , 仍 存 在 很 多 种 
操作 排列 。 一 个 Account 对 象 的 最 小 行为 的 生命 历史 包含 以 下 操作 : 

cpen。 setup。 deposit。 withdraw* close 
这 表示 Account 的 最 小 测试 序列 。 然 而 ,可 以 在 这 个 序列 中 发 生 大 量 其 他 行为 ， 

cpen。 setup。 deposit。 [deposit|withdraw|balance| summarize|creditLimit]" *« withdraw* close 
可 以 随机 产生 一 些 不 同 的 操作 序列 ,例如 : 

测试 用 例 六 : 

cpen。 setup* deposit。 deposit*balance。 summarize。 withdraw close 

测试 用 例 7; : 

apene setup deposite withdraw deposit* balanoe® creditLimit® withdraw close 


执行 这 些 序 列 和 其 他 随机 顺序 测试 ,以 检查 不 同类 实例 的 生命 历史 。 
11.5.2 类 级 的 划分 测试 


与 传统 软件 的 等 价 划 分 基本 相似 ,划分 测试 减 小 测试 特定 类 所 需 的 测试 用 例 数量 。 
对 输入 和 输出 进行 分 类 ,设计 测试 用 例 以 检查 每 个 分 类 。 

基于 状态 划分 就 是 根据 它们 改变 类 状态 的 能 力 对 类 操作 进行 分 类 。 再 考虑 Account 
类 ,状态 操作 包括 deposit() 和 withdraw() ,而 非 状态 操作 包括 balance() ,summarize() 和 
creditLimit() 。 将 改变 状态 的 操作 和 不 改变 状态 的 操作 分 开 ,分 别 进行 测试 ,因此 : 

测试 用 例 pi : 


apen* setup® deposit* deposit* withdraw withdraw close 
测试 用 例 p; : 


apen* setup* deposit® summarize creditLimit® withdraw close 
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测试 用 例 户 检 查 改变 状态 的 操作 ,而 测试 用 例 p; 检查 不 改变 状态 的 操作 (除了 那些 


最 小 测试 序列 中 的 操作 ) 。 


基于 属性 划分 就 是 根据 它们 所 使 用 的 属性 对 类 操作 进行 分 类 。 对 于 类 Account, 属 
性 balance 和 creditLimit 可 用 于 定义 划分 。 操 作 可 分 为 3 类 : @ 使 用 creditLimit 的 操 
作 ; 四 修改 creditLimit 的 操作 ; @ 既 不 使 用 也 不 修改 creditLimit 的 操作 。 然 后 为 每 个 划 


分 设计 测试 序列 。 


基于 类 别 划 分 就 是 根据 每 个 操作 所 完成 的 一 般 功 能 对 类 操作 进行 分 类 。 例 如 ,在 类 
Account 中 ,操作 可 分 为 初始 化 操作 (open .setup) ,计算 操作 (deposit withdraw) ,查询 操 
作 (balance .summarize creditLimit) 及 终止 操作 (close) 。 


11.6 类 间 测 试用 例 设 


计 


当 开始 集成 面向 对 象 系统 时 ,测试 用 例 的 设计 变 得 更 为 复杂 。 在 这 个 阶段 必须 开始 
类 间 协 作 的 测试 。 为 说 明 “ 类 间 测 试用 例 生成 ”, 我 们 扩展 上 面 讨论 的 银行 例子 ,让 它 包 括 
图 11-2 中 的 类 与 协作 。 图 中 箭头 的 方向 指明 消息 传递 的 方向 ,标注 则 指明 作为 消息 隐 含 


的 协作 的 结果 而 调用 的 操作 。 
cardInserted verifyAcct 
password verifyPIN 
deposit verifyPolicy 
withdraw withdrawReq 
accntStatus depositReq 
ATM terminate acctinfo 
User ATM Bank 
Interface | 一 
有 openAcct 
verifyStatus initialDeposit 
depositStatus authorizeCard 
dispenseCash deauthorize i validPIN 
printAccntStat GAGE creditLimit 
readCardinfo accntType validAcet 
getCashAmnt balance 
1 withdraw 
deposit 
close 
Cashier | Account Vanidation, 
Info 


11.6.1 多 类 测试 


图 11-2 银行 应 用 的 类 协作 图 


与 单个 类 的 测试 相 类 似 , 类 协作 测试 可 以 通过 运用 随机 和 划分 方法 、 基 于 场景 测试 及 


行为 测试 来 完成 。 


生成 多 类 随机 测试 用 例 的 方法 利用 下 列 步骤 : 
(1) 对 每 个 客户 类 ,使 用 类 操作 列表 来 生成 一 系列 随机 测试 序列 。 这 些 操作 将 向 其 
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他 服务 类 发 送 消息 。 
(2) 对 生成 的 每 个 消息 ,确定 协作 类 和 服务 对 象 中 的 相应 操作 。 
(3) 对 服务 对 象 中 的 每 个 操作 (已 被 来 自 客户 对 象 的 消息 调用 ) ,确定 它 传送 的 消息 。 
(4) 对 每 个 消息 ,确定 下 一 层 被 调用 的 操作 ,并 将 其 引入 到 测试 序列 中 。 
为 便于 说 明 ,考虑 Bank 类 相对 于 ATM 类 的 操作 序列 (图 11-2) : 


verifyAcct® verifyPIN® [[verifyPolicy withdrawReq] | depositReq| acctInfoREQ] 


Bank 类 的 一 个 随机 测试 用 例 可 以 是 : 

测试 用 例 x; : 

为 考虑 涉及 该 测试 的 协作 者 ,考虑 与 测试 用 例 rs 中 提 到 的 操作 相关 的 消息 。 为 了 执 
行 verifyAcct( ) 与 verifyPIN()，Bank 类 必须 与 ValidationInfo 类 协作 。 为 了 执行 
depositReq() ,Bank 类 必须 与 Account 类 协作 。 因 此 ,检查 这 些 协 作 的 新 测试 用 例 为 ， 

测试 用 例 m : 

verifyAcct [Bank:validAcctValidationInfo]* verifyPIN 

[Bank:validpinValidationInfo]* depositReq[Bank:depositacoount] 

多 个 类 的 划分 测试 方法 与 单个 类 的 划分 测试 方法 类 似 , 然 而 ,可 以 对 测试 序列 进行 扩 
展 ,以 包括 那些 通过 发 送 给 协作 类 的 消息 而 激活 的 操作 。 另 一 种 划分 测试 方法 基于 特殊 
类 的 接口 。 参 看 图 11-2, Bank 类 从 ATM 类 和 Cashier 类 接收 消息 ,因此 ,可 以 通过 将 
Bank 类 中 的 操作 划分 为 服务 于 ATM 类 的 操作 和 服务 于 Cashier 类 的 操作 对 其 进行 测 
试 。 基 于 状态 的 划分 可 用 于 进一步 细 化 上 述 划 分 。 


11.6.2 从 行为 模型 导出 的 测试 


用 状态 图 表示 类 的 动态 行为 模型 ,类 的 状态 图 可 用 于 辅助 生成 检查 类 (以 及 与 该 类 的 
协作 类 ) 的 动态 行为 的 测试 序列 。 图 11-3 给 出 了 前 面 讨论 的 Account 类 的 状态 图 。 根 据 
该 图 ,初始 变换 经 过 了 “Empty acct” 状 态 和 “Setup acct” 状 态 , 该 类 实例 的 绝 大 多 数 行为 
发 生 在 “Working acct” 状 态 。 最 终 的 withdrawal 和 结束 账户 操作 使 得 Account 类 分 别 向 
“Nonworking acct” 状 态 和 “Dead acct” 状 态 发 生 转 换 。 

将 要 设计 的 测试 应 该 覆盖 所 有 的 状态 ,也 就 是 说 ,操作 序列 应 该 使 Account 类 能 够 向 
所 有 可 允许 的 状态 转换 : 

测试 用 例 5 : 

cpen® setupRccnt* deposit (initial)* withdraw (final)* close 

应 该 注意 到 ,这 个 序列 与 11. 5. 2 节 所 讨论 的 最 小 测试 序列 相同 。 下 面 将 其 他 测试 序 
列 加 入 最 小 测试 序列 中 : 

测试 用 例 s; : 
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Empty Set up 
Open acct Setup Acent acct 


Deposit(initial》 
Deposit 
Balance Woreng 


credit a Withdraw 
accntTnfo 
Withdrawal(final} 
© Dead Nonworking 
acct Close acct 


图 11-3 Account 类 的 状态 转换 图 


cpen® setupPccnt* deposit (initial)® deposit* balanoe* credite withdraw (final)* close 

测试 用 例 5;: 

apene setupRccnt* deposit (initial)j*deposite withdraw accntInfo* withdraw (final)* close 

可 以 设计 更 多 的 测试 用 例 以 保证 该 类 的 所 有 行为 已 被 充分 检查 。 在 该 类 的 行为 与 一 
个 或 多 个 类 产生 协作 的 情况 下 ,可 以 用 多 个 状态 图 来 追踪 系统 的 行为 流 。 

可 以 通过 “广度 优先 ”的 方式 来 遍历 状态 模型 。 在 这 里 ,广度 优先 意味 着 一 个 测试 用 
例 检 查 单个 转换 , 当 测试 新 的 转换 时 , 仅 使 用 前 面 已 经 测试 过 的 转换 。 

考虑 银行 系统 中 的 一 个 CreditCard 对 象 。CreditCard 对 象 的 初始 状态 为 undefined 
( 即 未 提供 信用 卡号 ) 。 在 销售 过 程 中 一 旦 读 取信 用 卡 ,对 象 就 进入 了 defined 状态 , 即 属 
性 card number、expiration date 以 及 银行 专用 的 标识 符 被 定义 。 当 信用 卡 被 发 送 以 请 求 
授权 时 , 它 处 于 submitted 状态 , 当 接 收 到 授权 时 , 它 处 于 approved 状态 。 可 以 通过 设计 
使 转换 发 生 的 测试 用 例 来 测试 CreditCard 对 象 从 一 个 状态 到 另 一 个 状态 的 转换 。 对 这 
种 测试 类 型 的 广度 优先 方法 在 检查 undefined 和 defined 之 前 ,不 会 检查 submitted 状态 。 
若 这 样 做 了 , 它 就 使 用 了 尚未 经 过 测试 的 转换 ,从 而 违反 了 广度 优先 准则 。 


11.7 习题 


请 参考 课文 内 容 以 及 其 他 资料 ,完成 下 列 选择 题 。 
(1) 以 下 关于 面向 对 象 软 件 测试 的 说 法 中 ,正确 的 是 ( 和 
A. 面向 对 象 软件 只 能 采用 白 盒 测试 ,不 能 采用 黑 盒 测 试 
B. 测试 一 个 类 时 ,该 类 成 员 方 法 的 任何 一 个 消息 序列 都 是 合理 的 测试 用 例 
C. 若 类 也 是 类 A 的 子 类 ,针对 类 B 的 测试 用 例 可 以 包含 对 类 A 的 成 员 方 法 的 
调用 
D. 等 价 类 划分 是 一 种 类 树 层 次 的 测试 技术 
(2) 以 下 关于 面向 对 象 程序 集成 测试 的 说 法 中 ,错误 的 是 ( 听 
A. 大 突击 集成 只 进行 一 轮 无 须 增 量 集成 
B. 与 大 突击 集成 相 比 , 自 底 向 上 集成 通常 有 助 于 得 到 更 高 的 测试 充分 性 
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C. 基于 集成 在 任何 情况 下 都 优 于 自 底 向 上 集成 

D. 无 论 是 自 底 向 上 集成 还 是 自 顶 向 下 集成 ,都 需要 为 集成 测试 开发 相应 代码 
(3) 单元 测试 的 测试 对 象 不 包括 ( js 

A. 设计 单元 B. 各 个 操作 C. 内 部 消息 序列 D. 场景 
(4) 一 个 好 的 程序 实现 是 要 考虑 各 种 可 能 出 错 的 条 件 , 并 进行 适当 的 出 错 处 理 , 即 预 


设 各 种 出 错 处 理 的 ( 和 
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A. 现象 B. 策略 C. 通路 D. 场景 
(5) 以 下 哪 种 测试 属于 面向 对 象 程序 集成 测试 考虑 的 范畴 ? ( ) 
A. 针对 一 个 类 的 多 个 成 员 方 法 间 协 作 的 测试 
B. 针对 一 个 成 员 方 法 的 不 同 输入 情况 的 测试 
C. 针对 多 个 类 的 多 个 实例 间 协 作 的 测试 
D. 针对 一 个 类 树 上 多 个 类 间 继 承 的 测试 
(6) 关于 面向 对 象 软件 测试 的 说 法 中 ,错误 的 是 (。”)。 
A. 面向 对 象 软件 的 大 突击 集成 测试 只 进行 一 轮 ,无 须 增 量 集成 
B. 测试 一 个 类 的 不 同 实 例 间 的 协作 属于 面向 对 象 软件 单元 测试 考虑 的 范畴 
C. 测试 动态 绑 定 属于 面向 对 象 软件 单元 测试 考虑 的 范畴 
D. 等 价 类 划分 是 一 种 类 树 层 次 的 测试 技术 
(7) 关于 面向 对 象 程序 单元 测试 的 说 法 中 ,正确 的 是 ( js 
A. 只 要 对 类 的 每 个 成 员 方 法 都 进行 了 测试 ,就 可 完成 对 该 类 的 单元 测试 
B. 不 需要 对 抽象 类 进行 单元 测试 
C. 基于 判定 表 的 测试 可 以 用 于 面向 对 象 程序 的 单元 测试 
D. 不 变 式 边界 测试 是 一 种 针对 类 树 多 态 性 的 测试 技术 
以 下 关于 面向 对 象 软件 测试 的 说 法 中 ,正确 的 是 ( 法 
A. 单个 成 员 方 法 的 测试 不 属于 面向 对 象 单元 测试 考虑 的 范畴 
B. 等 价 类 划分 测试 只 适用 于 传统 软件 的 测试 ,不 适用 于 面向 对 象 软件 的 测试 
C， 基 于 判定 表 的 测试 适用 于 面向 对 象 软件 的 测试 
D. 抽象 类 无 法 进行 单元 测试 
以 下 关于 面向 对 象 软件 测试 的 说 法 中 ,正确 的 是 ( 和) 
A. 大 突击 集成 是 最 有 效 的 面向 对 象 软件 集成 测试 策略 
B. 在 面向 对 象 软件 的 单元 测试 中 ,一 棵 继承 树 上 的 每 个 类 都 需要 进行 测试 
C. 针对 一 个 类 的 多 个 实例 间 协 作 的 测试 属于 面向 对 象 软件 集成 测试 考虑 的 
范畴 
D. 在 面向 对 象 软件 的 单元 测试 中 基于 判定 表 的 测试 是 类 层次 测试 的 常用 方法 
(10) 场景 测试 方法 是 基于 IBM 推行 的 RUP 的 测试 用 例 生 成 方法 ,该 方法 的 出 发 点 
) 


(8 


(9 


A. 事件 流 B. 数据 流 C. 控制 流 D. 用 例 
(11) 以 类 为 单元 进行 单元 测试 时 ,以 下 说 法 中 正确 的 是 ( 
A. 一 个 测试 用 例 可 以 调用 该 类 的 多 个 方法 ,但 每 个 方法 只 能 调用 一 次 
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B. 一 个 测试 用 例 只 能 调用 在 该 类 中 定义 的 方法 ,不 能 调用 在 该 类 的 父 类 中 定 
义 的 方法 
C. 由 该 类 方法 组 成 的 任何 一 个 序列 都 是 一 个 合理 的 测试 用 例 
D. 针对 一 个 类 的 多 个 实例 间 协 作 的 测试 仍然 属于 面向 对 象 单元 测试 的 范畴 
(12) 以 下 关于 面向 对 象 软件 测试 的 说 法 中 ,错误 的 是 ( ”)。 
A. 不 变 式 边 界 测试 是 一 种 类 级 别 的 单元 测试 技术 
B. 对 于 一 棵 继承 树 上 的 多 个 类 ,只 有 处 于 叶 节 点 的 类 需要 测试 
C. 测试 动态 绑 定 是 类 树 测 试 的 一 个 目标 
D. 在 面向 对 象 单 元 测试 中 ,等 价 类 划分 测试 可 以 用 于 方法 级 别 的 测试 
(13) 以 下 关于 面向 对 象 软 件 集成 测试 的 说 法 中 ,正确 的 是 (  )。 
A. 大 突击 测试 是 面向 对 象 软件 集成 测试 中 效果 最 差 的 方法 
B. 基于 判定 表 的 测试 是 面向 对 象 软件 集成 测试 的 常用 方法 
C. 大 突击 测试 无 须 增 量 集成 
D. 自 底 向 上 集成 需要 开发 的 测试 代码 总 是 比 自 顶 向 下 集成 需要 开发 的 测试 代 
码 多 
(14) 下 列 关于 面向 对 象 中 封装 的 理解 ,错误 的 是 ( > 
A. 封装 是 一 种 信息 隐蔽 技术 ,是 指 将 数据 和 算法 拥 绑 成 一 个 整体 , 存 取 数 据 时 
只 需要 知道 其 算法 的 外 部 接口 而 无 须 了 解数 据 的 内 部 结构 
B. 对 象 是 其 全 部 属性 和 全 部 服务 紧密 结合 而 形成 的 一 个 不 可 分 割 的 整体 
C. 对 象 是 一 个 不 透明 的 盒子 ,表示 对 象 状态 的 数据 和 实现 操作 的 代码 都 被 封 
装 在 黑 盒子 里 边 
D. 使 用 了 封装 机 技术 以 后 ,类 内 部 的 数据 和 方法 完全 不 可 以 被 外 界 直接 访问 
(15) 比较 传统 的 软件 单元 测试 与 面向 对 象 软 件 的 单元 测试 的 内 容 , 下 列 说 法 错误 的 


是 ( Ys 

A. 传统 的 软件 单元 测试 的 对 象 是 软件 设计 的 最 小 单位 一 一 模块 ,测试 依据 是 
详细 设计 说 明 书 

B. 单元 测试 应 对 模块 内 所 有 重要 的 控制 路 径 设计 测试 用 例 , 以 便 发 现 模块 内 
部 的 错误 

C. 面向 对 象 软件 很 难 对 单个 成 员 方 法 进行 充分 的 测试 ,具有 良好 封装 性 的 类 
称 为 单元 测试 的 基本 对 象 

D. 面向 对 象 软件 的 测试 大 多 采用 白 盒 测试 技术 ,系统 内 多 个 模块 可 以 并 行 地 
进行 测试 


(16) 以 下 关于 面向 对 象 软件 的 集成 测试 策略 ,协作 集成 的 叙述 不 正确 的 是 ( 和 
A. 协作 集成 就 是 在 集成 测试 时 ,针对 系统 完成 的 功能 ,将 可 以 相互 协作 完成 特 
定 功 能 的 类 集成 在 一 起 测试 
B. 协作 测试 的 优点 是 编写 测试 驱动 和 测试 桩 的 开销 小 
C. 协作 测试 的 缺点 是 , 当 协 作 关 系 复 杂 时 ,测试 难以 充分 进行 
D. 与 传统 集成 测试 相 比 ,协作 测试 通常 比较 完备 
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(17) 关于 面向 对 象 的 设计 ,下 列 说 法 错误 的 是 ( ”)。 
A. 面向 对 象 的 设计 以 面向 对 象 分 析 为 基础 归纳 出 类 
B. 建立 类 结构 或 进一步 构造 成 类 库 ,实现 分 析 结 果 对 问题 空间 的 抽象 
C. 面向 对 象 的 设计 是 面向 对 象 分 析 的 另 一 种 思维 方式 
D. 面向 对 象 的 设计 是 面向 对 象 分 析 进 一 步 的 细 化 和 更 高 的 抽象 
(18) 关于 面向 对 象 软件 单元 测试 的 说 法 ,错误 的 是 ( ji 
A. 面向 对 象 软件 中 可 独立 被 测试 的 单元 通常 是 一 个 类 族 
B. 面向 对 象 软件 中 可 独立 被 测试 的 单元 也 可 能 是 一 个 独立 的 类 
C. 面向 对 象 的 单元 测试 分 为 方法 层次 类 层次 和 类 树 层次 的 测试 
D. 面向 对 象 的 单元 测试 与 面向 过 程 的 单元 测试 目的 相同 
(19) 在 面向 对 象 软件 的 集成 测试 中 ,集成 策略 反映 了 集成 测试 中 如 何 选择 每 轮 测试 


的 对 象 ,实际 测试 中 为 保证 测试 充分 , 常 考虑 测试 类 间 的 连接 常用 技术 有 (  ” )。 


易 ( 
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人 @ 类 关联 的 多 重 性 测试 @ 受 控 异 常 测试 
@ 往返 场景 测试 @ 模 态 机 测试 
A. DOYO BOOQ@ C.D D. DOO@ 


(20) 下 列 关于 面向 对 象 软件 测试 的 说 法 中 ,正确 的 是 ( )。 
A. 在 测试 一 个 类 时 ,只 要 对 该 类 的 每 个 成 员 方法 都 进行 充分 的 测试 就 完成 了 
对 该 类 充分 的 测试 
B. 在 存在 多 态 的 情况 下 ,为 了 达到 较 高 的 测试 充分 性 ,应 对 所 有 可 能 的 绑 定 都 
进行 测试 
C. 假设 类 B 是 类 A 的 子 类 ,如 果 类 A 已 进行 了 充分 的 测试 ,在 测试 类 B 时 不 
必 测 试 任何 类 B 继承 类 A 的 成 员 方法 
D. 对 于 一 棵 继承 树 上 的 多 个 类 ,只 有 处 于 叶 节点 的 类 需要 测试 
(21) 下 列 哪 种 测试 不 属于 面向 对 象 单元 测试 考虑 的 范畴 ? ( ) 
A. 成 员 方 法 的 测试 B. 类 的 测试 
C. 类 树 的 测试 D. 多 个 相互 协作 的 类 树 的 测试 
(22) 下 列 关于 面向 对 象 集成 测试 的 说 法 中 ,正确 的 是 ( )。 
A. 大 突击 集成 是 面向 对 象 集成 测试 最 常用 且 最 有 效 的 方法 
B. 自 底 向 上 集成 和 自 项 向 下 集成 都 需要 为 集成 测试 开发 大 量 代码 
C. 协作 集成 在 任何 情况 下 都 优 于 自 底 向 上 集成 和 自 顶 向 下 集成 
D. 高 频 集成 是 以 自 底 向 上 集成 为 基础 ,利用 冒 烟 测 试 进行 的 集成 测试 
(23) 大 突击 测试 把 所 有 的 模块 一 次 性 集成 为 一 个 完整 的 系统 后 进行 测试 ,很 容 
)。 
A. 通过 测试 B. 整体 测试 C. 快速 查 错 D. 快速 排 错 
(24) 以 下 关于 面向 对 象 软件 测试 的 说 法 中 ,正确 的 是 ( 和 
A. 面向 对 象 软件 的 白 盒 测 试 不 能 不 加 改变 地 照搬 传统 软件 的 白 盒 测 试 准则 
B. 对 于 一 个 类 的 测试 ,一 个 测试 用 例 只 能 包含 对 该 类 的 一 个 方法 的 一 次 调用 
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C. 面向 对 象 软件 测试 不 考虑 对 一 个 类 中 的 单个 方法 的 测试 
D. 面向 对 象 软件 测试 不 必 考 虑 对 继承 关系 的 测试 
(25) 以 下 关于 面向 对 象 程序 集成 测试 的 说 法 中 正确 的 是 (  )。 
A. 大 突击 集成 是 一 种 综合 运用 自 底 向 上 集成 与 自 顶 向 下 集成 的 测试 策略 
B. 自 底 向 上 集成 测试 比 自 顶 向 下 集成 测试 需要 开发 的 代码 更 多 
C. 协作 集成 是 指 将 可 以 协作 完成 特定 系统 功能 的 类 集成 在 一 起 进行 测试 
D. 与 自 底 向 上 集成 和 自 顶 向 下 集成 相 比 ,基于 集成 是 一 种 更 充分 的 集成 测试 
策略 
(26) 以 下 关于 面向 对 象 软件 测试 的 说 法 中 ,错误 的 是 (。”)。 
A. 对 于 面向 对 象 程序 集成 测试 而 言 ,大 突击 集成 可 能 导致 测试 不 充分 
B. 面向 对 象 软件 只 能 采用 和 白 盒 测 试 ,不 能 采用 黑 盒 测 试 
C. 在 存在 多 态 的 情况 下 ,为 了 提高 测试 的 充分 性 需要 对 所 有 可 能 的 绑 定 都 进 
行 测试 
D. 单个 成 员 方 法 的 测试 属于 面向 对 象 程序 单元 测试 考虑 的 范畴 
(27) 以 下 关于 面向 对 象 软件 测试 的 说 法 中 ,正确 的 是 (  )。 
A. 对 于 一 个 类 的 测试 一 个 测试 用 例 只 能 包含 对 该 类 的 一 个 方法 的 一 次 调用 
B. 基于 判定 表 的 测试 不 能 用 于 面向 对 象 程序 的 单元 测试 
C. 不 变 式 边界 测试 可 用 于 类 层次 的 测试 ,其 目的 是 测试 功能 组 合 
D. 对 于 抽象 类 ,需要 进行 单元 测试 
(28) 以 下 关于 面向 对 象 程序 集成 测试 的 说 法 中 ,正确 的 是 (  )。 
A. 大 突击 集成 在 任何 情况 下 都 是 效果 最 差 的 面向 对 象 程序 集成 测试 策略 
B. 自 底 向 上 集成 和 自 项 向 下 集成 都 需要 为 集成 测试 开发 大 量 辅助 代码 
C. 协作 集成 从 本 质 上 讲 是 一 种 自 底 向 上 集成 
D. 基于 集成 从 本 质 上 讲 是 一 种 自 顶 向 下 集成 


11.8 实验 与 思考 
11.8.1 实验 目的 


本 节 “ 实 验 与 思考 ”的 目的 : 

(1) 熟悉 面向 对 象 软件 测试 的 相关 概念 和 基本 内 容 。 

(2) 分 析 一 个 为 学 生 管理 系统 软件 开发 的 查询 程序 ,给 出 该 查询 程序 的 查询 条 件 表 
达 式 ;用 等 价 类 测试 方法 给 出 输入 条 件 的 等 价 类 表 。 
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(3) 分 析 一 C 源 程序 , 画 出 程序 中 main 函数 的 控制 流程 图 ;设计 一 组 测试 用 例 , 使 该 
程序 所 有 函数 的 语句 覆盖 率 和 分 支 获 盖 率 均 能 达到 100%。 


11.8.2 工具 /准备 工作 


在 开始 本 实验 之 前 ,请 认真 阅读 课程 的 相关 内 容 。 
需要 准备 一 台 带 有 浏览 器 、 能 够 访问 因特网 的 计算 机 。 


11.8.3 实验 内 容 与 步骤 
1) 概念 理解 。 


请 查阅 有 关 资 料 ,根据 你 的 理解 和 看 法 ,给 出 下 列 概念 的 定义 : 
(1) 基于 故障 的 测试 : 


(2) 基于 场景 的 测试 : 


(3) 表层 结构 测试 : 


(4) 深层 结构 测试 : 


2) 一 个 大 学 信息 学 院 学 生 管 理 系 统 软件 ,其 学 生 文件 Student 记录 的 部 分 属性 包括 
Name、Num、Age、Sex、Dept 等 。 其 中 : 

Name( 学 生 名 ) 要 求 最 少 2 个 字符 ,最 多 8 个 字符 ; 

Num( 学 号 ) 要 求 是 10 位 无 符号 整数 , 取 值 范围 为 2010200001 一 2010203335， 

Age( 年 龄 ) 要 求 是 2 位 无 符号 整数 , 取 值 范围 为 12 一 99; 

Sex( 性 别 ) 是 枚 举 型 ,只 有 两 个 取 值 male( 男 ) .female( 女 ); 

Dept( 系 名 ) 是 枚 举 型 , 取 值 可 以 是 AT( 自 动 化 系 )、.CS( 计 算 机 系 )、.ET( 电 子 系 )、MN 
( 微 纳 电子 系 )、SW( 软 件 学 院 ) 。 

现 有 一 个 新 开发 的 查询 程序 ,要 求 输入 学 生年 龄 的 上 限 A、 性 别 S、 系 名 D, 利 用 文件 
Student 查询 所 有 年 龄 小 于 A 岁 且 性 别 为 S 的 D 系 的 学 生 , 并 输出 这 些 学 生 的 姓名 和 
年 龄 。 

请 针对 此 程序 完成 以 下 工作 : 

(1) 给 出 该 查询 程序 的 查询 条 件 表达 式 : 


(2) 用 等 价 类 测试 方法 给 出 输入 条 件 的 等 价 类 表 , 填 人 表 11-1。 
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表 11-1 


输入 条件 有 效 等 价 类 


无 效 等 价 类 


3) 已 知 C 源 程序 如 下 : 


/# 分 数 运算 fsys.cx / 
#include< stdio.h> 
int main() 
{ 
long int a, by c. d, i, x, y, 2; 
char op; 
Erintf(" 两 分 数 b/a, d/c 作 + 、-、* 、/ 四 则 运算 ,结果 为 分 数 。\n"); 
printf ("请 输入 分 数 运算 式 : b/a op d/c \n"); 
Scanf (" ld/% 1d% c% 1d/% 1d", &h, &a, &op, &d, &c); 
if (e==01| ==0) { 
Printf(" 分 母 为 0, 输 入 错误 1\n"); 
retum 0; 
} 
if (op=='+"){ 
bx ctdx* a; 
x=ax ci /* 运算 结果 均 为 y/xx / 
} 
证 (pr 一 一 ) 1 
bx* c-dx*a; 
ac 
} 
证 (op-="*"){ 
Yb* ce; 
ax*d; 
2 
if (Oy) sy; 
Zz; 
while (>1){ 
if (%i==0 && y* i==0) { 
Ex/i; 


天 Zhi 
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} 
Printf(% ld/s ld% cs ld/% ld=%1d/s1d. \n", by a, op, d, cy y, 3); 
retum 0; 


(1) 请 在 一 白 纸 上 夯 出 程序 中 main 函数 的 控制 流程 图 ,并 粘贴 于 此 处 (相关 说 明 请 
标注 于 图 上 )。 


一 一 一 一 一 精 贴 处 一 一 一 一 一 一 一 一 


(2) 设计 一 组 测试 用 例 , 使 该 程序 所 有 函数 的 语句 覆盖 率 和 分 支 获 盖 率 均 能 达到 
100%。 如 果 认 为 该 程序 的 语句 覆盖 率 或 分 支 获 盖 率 无 法 达到 100%, 需 说 明 为 什么 。 
用 例 1: 
用 例 2 
用 例 3 
用 例 4: 
用 例 5: 
6 
省 
8 


用 侦 
用 例 
用 例 8: 
结论 : 


11.8.4 实验 总 结 


11.8.5 实验 评价 (教师 ) 


11.9 阅读 与 分 析 : 数据 库 测 试 的 种 类 和 方法 


从 测试 过 程 的 角度 来 说 ,我 们 可 以 把 数据 库 测 试 分 为 系统 测试 .集成 测试 和 单元 
测试 。 
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测试 面向 对 象 应 用 系统 


1) 系统 测试 

传统 软件 系统 测试 的 测试 重点 是 需求 覆盖 ,对 数据 库 的 测试 同样 也 需要 对 需求 覆盖 
进行 保证 。 在 数据 库 设 计 初 期 需要 进行 分 析 \、 测 试 , 例 如 存储 过 程 . 视 图 、 触 发 器 、 约 束 、 规 
则 等 ,都 需要 进行 需求 的 验证 ,确保 这 些 功 能 设计 符合 需求 。 另 一 方面 ,需要 确认 数据 库 
设计 文档 和 最 终 的 数据 库 相 同 , 当 设计 文档 变化 时 ,同样 要 验证 修改 是 否 落实 到 了 数据 
冉 主 。 

这 个 阶段 ,测试 主要 通过 数据 库 设计 评审 来 实现 。 

2) 集成 测试 

集成 测试 主要 针对 接口 进行 。 从 数据 库 的 角度 来 说 和 普通 测试 稍微 有 些 区 别 。 对 于 
数据 库 测试 ,需要 考虑 的 是 数据 项 的 修改 操作 、 数 据 项 的 增加 操作 、 数 据 项 的 删除 操作 、 数 
据 表 增加 满 、, 数 据 表 删除 空 , 删 除 空 表 中 的 记录 、 数 据 表 的 并 发 操作 、 针 对 存储 过 程 的 接口 
测试 、 结 合 业务 逻辑 做 关联 表 的 接口 测试 。 同 样 需要 对 这 些 接口 考虑 采用 等 价 类 、 边 界 
值 、 错 误 猜 测 等 方法 进行 测试 。 

3) 单元 测试 

单元 测试 侧重 于 逻辑 履 盖 ,相对 于 复杂 的 代码 来 说 ,数据 库 开 发 的 单元 测试 要 简单 
些 , 可 以 通过 语句 履 盖 和 走读 的 方式 完成 。 

相 比 之 下 ,系统 测试 要 困难 一 些 ,因为 要 求 有 很 高 的 数据 库 设 计 能 力 和 丰富 的 数据 库 
测试 经 验 。 

我 们 也 可 以 从 测试 关注 点 的 角度 对 数据 库 进 行 分 类 , 即 功能 测试 .性 能 测试 和 安全 
测试 : 

1) 功能 测试 

对 数据 库 功 能 的 测试 可 以 依赖 测试 工具 进行 。 

DBunit: 一 款 开 源 的 数据 库 功能 测试 框架 ,可 以 使 用 类 似 与 JUnit 的 方式 对 数据 库 
的 基本 操作 进行 白 盒 的 单元 测试 ,对 输入 输出 进行 校 验 。 

QTP: 大 名 鼎鼎 的 自动 测试 工具 ,通过 对 对 象 的 捕捉 识别 ,可 以 通过 QTP 来 模拟 用 
户 的 操作 流程 ,通过 其 中 的 校 验方 法 或 者 结合 数据 库 后 台 的 监控 对 整个 数据 库 中 的 数据 
进行 测试 。 

DataFactory: 一 款 优秀 的 数据 库 数 据 自动 生成 工具 ,通过 它 可 以 轻松 地 生成 任意 结 
构 数 据 库 ,对 数据 库 进行 填充 ,帮助 生成 所 需要 的 大 量 数 据 从 而 验证 数据 库 中 的 功能 是 否 
正确 。 这 是 属于 黑 盒 测试 。 

2) 性 能 测试 

虽然 近年 来 硬件 进步 很 快 ,但 是 需要 处 理 的 数据 以 更 快 的 速度 在 增加 。 几 亿 条 记录 
的 表格 在 现在 是 司空 见 惯 的 ,如 此 庞大 的 数据 量 在 大 量 并 发 连接 操作 时 ,不 能 像 以 前 一 样 
随意 地 使 用 查询 、 连 接 查 询 、 谱 套 查 询 、 视 图 ,这 些 操作 如 果 不 当 会 给 系统 带 来 非常 巨大 的 
压力 ,严重 影响 系统 性 能 。 

数据 库 的 性 能 优化 分 4 部 分 : 

(1) 物理 存储 方面 。 

(2) 逻辑 设计 方面 。 
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(3) 数据 库 的 参数 调整 。 

(4) SQL 语句 优化 。 

如 何 对 性 能 方面 进行 测试 呢 ? 业界 也 提供 了 很 多 工具 ,通过 数据 库 系 统 的 SQL 语句 
分 析 工 具 , 可 以 找 出 数据 库 语句 执行 的 瓶颈 ,从 而 优化 SQL 语句 。 

Loadrunner: 可 以 通过 对 协议 的 编程 来 对 数据 库 做 压力 测试 。 

Swingbench: (这 是 一 个 重量 级 别 的 feature, 类 似 LR, 而 且 非 常 强大 ,只 不 过 专门 针 
对 oracle 而 已 ) 数 据 库 厂商 也 意识 到 这 点 ,例如 oraclellg 已 经 提供 了 real 
applicationtest, 提 供 数据 库 性 能 测试 ,分 析 系 统 的 应 用 瓶颈 。 

还 有 很 多 第 三 方 公司 开发 了 SQL 语句 优化 工具 来 帮助 你 自动 地 进行 语句 优化 工作 
从 而 提高 执行 效率 。 

3) 安全 测试 

软件 日 益 复 杂 , 而 数据 又 成 为 了 系统 中 重 中 之 重 的 核心 ,从 以 往 对 系统 的 破坏 现在 更 
倾向 于 对 数据 的 获取 和 破坏 。 而 数据 库 的 安全 被 提 到 了 最 前 端 ,自从 SQL 注入 攻击 被 发 
现 ,貌似 万 无 一 失 的 数据 库 一 下 从 后 台 变 为 了 前 台 , 而 一 旦 数据 库 被 攻破 ,整个 系统 也 会 
暴露 在 黑客 的 手下 ,通过 数据 库 强 大 的 存储 过 程 ,黑客 可 以 轻松 地 获得 整个 系统 的 权限 。 
而 SQL 的 注入 看 似 简 单 却 很 难 防范 ,对 于 安全 测试 来 说 ,如 何 防范 系统 被 注入 是 测试 的 
难点 。 

业界 也 有 相关 的 数据 库 注入 检测 工具 ,来 帮助 用 户 对 自身 系统 进行 安全 检测 。 

对 于 这 点 来 说 业界 也 有 标准 ,例如 ISO IEC 21827, 也 叫做 SSE CMM 3.0, 是 CMM 
和 ISO 的 集成 的 产物 ,专门 针对 系统 安全 领域 的 另外 一 方面 ,数据 库 的 健壮 性 、 容 错 性 和 
恢复 能 力也 是 测试 的 要 点 。 

功能 测试 .性 能 测试 、 安 全 测试 ,是 一 个 由 简 到 繁 的 过 程 ,也 是 数据 库 测 试 人 员 需 要 逐 
步 掌握 的 技能 ,这 也 是 以 后 公司 对 数据 库 测试 人 员 的 要 求 。 

资料 来 源 : 中 国 IT 实验 室 ,http://softtest. chinaitlab. com/ 。 


254 


第 12 章 测试 Web 应 用 系统 


WebApp 测试 是 一 组 相关 的 活动 ,这 些 活动 都 具有 共同 的 目标 , 即 发 现 WebApp 的 
内 容 功能 .可 用 人 性 .导航 性 ,性 能 、 容 量 及 安全 方面 存在 的 错误 。 为 实现 这 个 目标 ,要 同时 
应 用 包括 评审 及 运行 测试 的 测试 策略 。 参 加 WebApp 测试 的 人 员 包括 Web 工程 师 和 其 
他 项 目 利益 相 关 者 (经 理 、 客 户 . 最 终 用 户 ) 。 

WebApp 项 目 普遍 都 很 紧迫 。 利 益 相 关 者 由 于 担心 来 自 其 他 WebApp 的 竞争 , 迫 于 
客户 的 要 求 , 并 担心 可 能 失去 的 市 场 ,因而 迫使 WebApp 仓促 上 线 。 其 结果 是 ,在 Web 
开发 过 程 中 ,技术 活动 通常 开始 较 晚 有 时 给 WebApp 测试 留 下 的 时 间 很 短 , 这 可 能 是 一 
个 灾难 性 的 错误 。 

通常 情况 下 ,如 果 最 终 用 户 遇 到 错误 ,就 会 动摇 他 们 对 WebApp 的 信心 ,他 们 会 转向 
其 他 地 方 寻找 所 需要 的 内 容 及 功能 。 因 此 ,Web 工程 师 一 定 要 在 WebApp 上 线 前 尽 可 能 
多 地 排除 错误 ,确保 每 个 工作 产品 都 具有 高 质量 。 

在 进行 WebApp 测试 时 ,首先 关注 用 户 可 见 的 方面 ,之 后 进行 技术 及 内 部 结构 方面 
的 测试 ,所 要 进行 的 7 项 测试 是 : 内 容 测试 .界面 测试 .导航 测试 .构件 测试 .配置 测试 ,性 
能 测试 及 安全 测试 。 通 常 需要 制定 WebApp 测试 计划 ,为 每 一 个 测试 步骤 开发 一 组 测试 
用 例 , 并 对 记录 测试 结果 的 文档 进行 维护 ,以 备 将 来 使 用 。 


12.1 WebApp 的 测试 概念 


由 于 基于 Web 的 系统 及 应 用 位 于 网 络 上 ,并 与 很 多 不 同 的 操作 系统 .位 于 不 同 设备 
上 的 浏览 器 、 硬 件 平 台 .通信 协议 及 其 他 应 用 系统 进行 交互 ,因此 ,查找 错误 面临 着 重大 的 
挑战 。 

为 了 了 解 Web 环境 中 的 测试 目标 ,我们 必须 考虑 WebApp 质量 的 多 种 维度 ,同时 也 
考虑 测试 所 碰 到 错误 的 特性 以 及 为 发 现 这 些 错 误 所 采用 的 测试 策略 。 


12.1.1 质量 维度 


良好 的 设计 应 该 将 质量 集成 到 Web 应 用 系统 中 。 通 过 对 设计 模型 中 的 不 同 元 素 进 
行 一 系列 技术 评审 ,并 应 用 测试 过 程 对 质量 进行 评估 。 评 估 和 测试 都 要 检查 下 面 质量 维 
度 中 的 一 项 或 多 项 : 

。 内 容 : 在 语法 及 语义 层 对 内 容 进行 评估 。 在 语法 层 , 对 文档 进行 拼写 .标点 及 文 

法 方面 的 评估 ;在 语义 层 , 所 表示 信息 的 正确 性 、 整 个 内 容 对 象 及 相关 对 象 的 一 致 
性 及 清晰 性 都 要 进行 评估 。 
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功能 : 发 现 与 客户 需求 不 一 致 的 错误 。 对 每 一 项 WebApp 功能 ,评定 其 正确 性 、 
不 稳定 性 及 与 相应 的 实现 标准 (例如 ,Java 语言 标准 ) 的 总 体 符合 程度 。 
结构 : 保证 正确 地 表示 了 WebApp 的 内 容 及 功能 ,是 可 扩展 的 ,并 支持 新 内 容 、 新 


功能 的 增加 。 

。 可 用 性 : 保证 接口 支持 各 种 类 型 的 用 户 , 各 种 用 户 都 能 够 学 会 及 使 用 所 有 需要 的 
导航 语法 及 语义 。 

。 导航 性 : 检查 所 有 的 导航 语法 及 语义 ,发 现任 何 导航 错误 (例如 , 死 链 接 ,不 合适 
的 链接 、 错 误 链接 )。 


性 能 : 在 各 种 不 同 的 操作 条 件 、 配 置 及 负载 下 进行 测试 ,以 保证 系统 响应 用 户 的 
交互 并 处 理 极 端的 负载 情况 ,而 且 没 有 出 现 操作 上 不 可 接受 的 性 能 降低 。 
兼容 性 : 在 客户 端 及 服务 器 端的 各 种 不 同 的 主机 配置 下 ,通过 运行 WebApp, 对 
兼容 性 进行 测试 ,目的 是 发 现 针 对 特定 主机 配置 的 错误 。 

互 操作 性 : 保证 WebApp 与 其 他 应 用 系统 和 (或 ) 数 据 库 有 正确 接口 。 

安全 性 : 评定 可 能 存在 的 安全 弱点 ,尝试 对 每 个 弱点 进行 攻击 ,任何 成 功 的 突破 
都 被 认为 是 一 个 安全 漏洞 。 


12.1.2 WebApp 环境 中 的 错误 


成 功 的 WebApp 测试 所 遇 到 的 错误 具有 很 多 特点 ,如 : 

(1) 由 于 WebApp 测试 发 现 的 错误 类 型 很 多 都 首先 表现 为 客户 端 问题 ( 即 通 过 在 特 
定 浏览 器 或 个 人 通信 设备 上 实现 的 接口 ), Web 工程 师 看 到 了 错误 的 征兆 ,而 不 是 错误 
本 身 。 

(2) 由 于 WebApp 是 在 很 多 不 同 配置 及 不 同 环境 中 实现 的 ,要 在 最 初 遇 到 错误 的 环 
境 之 外 再 现 错误 ,可 能 很 困难 甚至 是 不 可 能 的 。 

(3) 虽然 许多 错误 是 不 正确 设计 或 不 合适 HTML( 或 其 他 程序 设计 语言 ) 编 码 的 结 
果 , 但 很 多 错误 的 原因 都 能 够 追溯 到 WebApp 配置 上 。 

(4) 由 于 WebApp 位 于 客户 /服务 器 体系 (C/S) 结 构 中 ,在 三 层 体系 结构 (客户 、 服 务 
器 或 网 络 本 身 ) 中 追踪 错误 很 困难 。 

(5) 某 些 错误 归于 静态 操作 环境 ( 即 进行 测试 的 特定 配置 ) ,而 另外 一 些 错误 归于 动 
态 操作 环境 ( 即 瞬 间 的 资源 负载 或 时 间 相 关 的 错误 ) 。 

上 述 5 个 错误 特点 说 明 : 在 WebApp 测试 中 发 现 错误 的 诊断 中 ,环境 起 着 非常 重要 
的 作用 。 在 某 些 情况 (例如 内 容 测试 ) 下 ,错误 的 位 置 是 明显 的 ;但 对 于 很 多 其 他 类 型 的 
WebApp 测试 (例如 导航 测试 ,性 能 测试 .安全 测试 ) ,错误 的 根本 原因 很 难 确定 。 


12.1.3 测试 策略 


WebApp 测试 策略 也 依据 传统 软件 测试 所 使 用 的 基本 原理 ,并 建议 采用 面向 对 象 系 
统 的 测试 策略 。 下 面 的 步骤 对 此 进行 了 归纳 : 
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(1) 对 WebApp 的 内 容 模型 进行 评审 ,以 发 现 错误 。 

(2) 对 接口 模型 进行 评审 ,保证 适合 所 有 的 用 例 。 

(3) 评审 WebApp 的 设计 模型 ,发现 导航 错误 。 

(4) 测试 用 户 界 面 ,发 现 表现 机 制 和 (或 ) 导 航 机 制 中 的 错误 。 

(5) 对 功能 构件 进行 单元 测试 。 

(6) 对 贯穿 体系 结构 的 导航 进行 测试 。 

(7) 在 不 同 的 环境 配置 下 实现 WebApp, 并 测试 WebApp 对 于 每 一 种 配置 的 兼容 性 。 

(8) 进行 安全 性 测试 ,试图 攻击 WebApp 或 其 所 处 环境 的 安全 弱点 。 

(9) 进行 性 能 测试 。 

(10) 通过 可 监控 的 最 终 用 户 群 对 WebApp 进行 测试 ;对 他 们 与 系统 的 交互 结果 进行 
评估 ,包括 内 容 和 导航 错误 .可 用 人 性、 兼容 性 .WebApp 的 安全 性 、 可 靠 性 及 性 能 等 方面 。 

WebApp 测试 是 Web 支持 人 员 所 从 事 的 一 项 持续 性 活动 ,一 些 回归 测试 是 从 开发 
WebApp 时 所 进行 的 测试 中 导出 的 。 


12.1.4 测试 过 程 
对 Web 应 用 进行 测试 时 ,通常 首先 测试 最 终 用 户 能 够 看 到 的 内 容 和 界面 。 随 后 再 对 
体系 结构 及 导航 设计 的 各 个 方面 进行 测试 。 最 后 ,测试 的 焦点 转 到 测试 技术 能 力 一 


WebApp 基础 设施 及 安装 或 实现 方面 的 问题 。 图 12-1 将 WebApp 的 测试 过 程 与 
WebApp 的 设计 金字 塔 相 并 列 ,注意 到 测试 流 是 从 左 到 右 、 从 上 到 下 移动 。 


内 容 测 试 | 
用 户 


内 容 测试 


体系 结构 设计 
构件 设计 
技术 


12-1 测试 过 程 


12.2 ”内容 测试 


Web 应 用 内 容 中 的 错误 可 能 是 印刷 错误 .不 正确 的 信息 、 不 合适 的 组 织 或 者 违背 知 
识 产 权 保护 的 法 令 法 规 等 。 内 容 测试 试图 在 用 户 碰 到 这 些 问 题 之 前 就 发 现 它们 。 内 容 测 
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试 结合 了 评审 和 可 运行 的 测试 用 例 的 生成 。 通 过 评审 来 发 现 内 容 中 的 语义 错误 ,通过 运 
行 测试 来 发 现 内 容错 误 。 


12.2.1 内 容 测 试 的 目标 


内 容 测试 有 3 个 重要 目标 : 

(1) 发 现 基 于 文本 的 文档 、 图 形 表示 和 其 他 媒体 中 的 语法 错误 (例如 ,打字 或 文法 
错误 ); 

(2) 发 现 导 航 中 的 任何 内 容 对 象 中 的 语义 错误 ( 即 信息 的 准确 性 和 完备 性 方面 的 
错误 ); 
(3) 发 现 展示 给 最 终 用 户 的 内 容 的 组 织 或 结构 方面 的 错误 。 

为 了 实现 第 一 个 目标 ,可 以 使 用 自动 拼写 和 语法 检查 。 然 而 ,一 些 语法 上 的 错误 可 能 
会 漏 检 ,而 需要 由 审查 人 员 ( 测 试 人 员 ) 来 发 现 。 语 义 测试 关注 于 每 个 内 容 对 象 所 显示 的 
信息 方面 。 评 审 (测试 人 员 ) 需 要 回答 以 下 问题 : 

。 信息 确实 准确 吗 ? 
信息 简洁 扼要 吗 ? 

内 容 对 象 的 布局 对 于 用 户 来 说 容易 理解 吗 ? 

由 入 在 内 容 对 象 中 的 信息 易于 被 发 现 吗 ? 

对 于 从 其 他 地 方 导出 的 所 有 信息 ,是 否 提 供 了 合适 的 引用 ? 

显示 的 信息 是 否 内 部 一 致 ?与 其 他 内 容 对 象 中 所 显示 的 信息 是 否 一 致 ? 
内 容 是 否 具有 攻击 性 ? 是 否 容易 造成 误解 ? 

内 容 是 否 存在 知识 产权 方面 的 问题 ? 

内 容 是 否 包 括 补 充 现 有 内 容 的 内 部 链接 ? 链接 正确 吗 ? 

内 容 的 美学 风格 是 否 与 界面 的 美学 风格 相 矛 盾 ? 

对 于 大 型 的 WebApp( 包 含 成 百 上 千 个 内 容 对 象 ) 来 说 ,要 获得 所 有 这 些 问题 的 答案 
可 能 是 一 项 令 人 旦 雏 的 任务 。 然 而 ,频繁 的 语义 错误 将 动摇 用 户 对 WebApp 的 信任 ,并 
且 会 导致 基于 Web 的 应 用 系统 的 失败 。 

内 容 对 象 存在 于 具有 特定 风格 的 体系 结构 之 中 。 在 内 容 测试 期 间 , 要 对 内 容 体系 结 
构 的 结构 及 组 织 进行 测试 ,以 确保 将 所 需要 的 内 容 以 合适 的 顺序 和 关系 展现 给 最 终 用 户 。 
例如 ,SafeHomeAssuled. com WebApp 显示 了 关于 传感器 的 多 种 信息 ,其 中 传感器 是 安 
全 和 监视 产品 的 一 部 分 。 内 容 对 象 提 供 描述 信息 、 技 术 规格 说 明 、 照 片 和 相关 的 信息 。 
SafeHomeAssured. com 内 容 体系 结构 的 测试 试图 发 现 这 种 信息 的 表示 方面 的 错误 ( 例 
如 ,用 传感器 Y 的 照片 来 描述 传感器 X) 。 


12.2.2 数据 库 测 试 


Web 应 用 系统 要 比 静 态 内 容 对 象 做 更 多 的 事情 。 在 很 多 应 用 领域 中 ,WebApp 要 与 
复杂 的 数据 库 管 理 系统 接口 ,并 构建 动态 的 内 容 对 象 ,这 种 对 象 是 使 用 从 数据 库 中 获取 的 
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数据 实时 创建 的 。 例 如 ,用 于 金融 服务 的 WebApp 能 够 产生 某 种 特殊 产权 (例如 ,股票 或 
共有 基金 ) 的 复杂 的 文本 信息 、 表 格 信息 和 图 形 信 息 。 当 用 户 申请 了 某 种 特殊 的 产权 信息 
后 ,系统 就 会 自动 创建 表示 这 种 信息 的 复合 内 容 对 象 。 为 了 完成 此 任务 ,需要 下 面 的 步 
又 : @ 查 询 大 型 产权 数据 库 ; 四 从 数据 库 中 抽取 相关 的 数据 ; 加 将 抽取 的 数据 组 织 为 一 
个 内 容 对 象 ; @ 将 这 个 内 容 对 象 ( 代 表 由 某 个 最 终 用 户 请 求 的 定制 信息 ) 传 送 到 客户 环境 
显示 。 每 个 步骤 的 结果 都 可 能 发 生 错误 ,数据库 测试 的 目标 就 是 发 现 这 些 错 误 。 

数据 库 测试 还 会 由 于 以 下 多 种 原因 而 变 得 复杂 : 

(1) 客户 端 请 求 的 原始 信息 很 少 能 够 以 被 输入 到 数据 库 管 理 系统 CDBMS) 中 的 形式 
(例如 ,结构 化 查询 语言 SQL) 表 示 出 来 。 因 此 ,应 该 设计 测试 ,用 来 发 现 将 用 户 的 请 求 翻 
译 成 能 够 被 DBMS 处 理 的 格式 时 所 产生 的 错误 。 

(2) 数据 库 可 能 离 装 载 WebApp 的 服务 器 很 远 。 因 此 ,应 该 设计 测试 ,用 来 发 现 
WebApp 和 远程 数据 库 之 间 的 通信 所 存在 的 错误 ( 当 遇 到 分 布 式 数据 库 , 或 者 需要 访问 
数据 仓库 时 ,这些 测 试 可 能 变 得 非常 复杂 ) 。 

(3) 从 数据 库 中 获取 的 原始 数据 一 定 要 传递 给 WebApp 服务 器 ,并 且 被 正确 地 格式 
化 ,以 便 随 后 传递 给 客户 端 。 因 此 ,应 该 设计 测试 ,用 来 证 明 WebApp 服务 器 接收 到 的 原 
始 数据 的 有 效 性 ,并 且 还 要 生成 另外 的 测试 ,证 明 转 换 的 有 效 性 ,将 这 种 转换 应 用 于 原始 
数据 ,能 够 生成 有 效 的 内 容 对 象 。 

(4) 动态 内 容 对 象 一 定 以 能 够 显示 给 最 终 用 户 的 形式 传递 给 客户 端 。 因 此 应 该 设计 
一 系列 测试 ,用 来 发 现 内 容 对 象 格式 方面 的 错误 ,以 及 测试 与 不 同 的 客户 环境 配置 的 兼 
容 性 。 


考虑 上 面 这 4 种 因素 ,对 图 12-2 中 记录 的 每 一 客户 层 一 用 户 界面 
“交互 层 ”, 都 应 该 使 用 测试 用 例 的 设计 方法 。 测 试 1 HTML 脚本 
应 该 保证 : 有 效 信息 通过 界面 层 在 客户 与 服务 器 服务 器 层 一 WebApp 
之 间 传 递 ; @@WebApp 正确 地 处 理 脚 本 ,并 且 正 确 用 户 数据 
地 抽取 或 格式 化 用 户 数 据 ; @ 用 户 数据 被 正确 地 传 服务 器 层 一 数据 转换 
递 给 服务 器 端的 数据 转换 功能 ,此 功能 格式 化 为 合 用 户 数据 一 一 SQL 
适 的 查询 (例如 ,SQL);， @ 查 询 被 传递 到 数据 管理 服务 器 层 一 数据 管理 
层 ,此 层 与 数据 库 访 问 程序 (很 可 能 位 于 另 一 台 机 {sor 
器 ) 通 信 。 数据 库 屋 一 数据 访问 
通常 使 用 可 复 用 的 构件 来 构造 图 12-2 所 示 的 
数据 转换 层 ,数据 管理 层 和 数据 库 访问 层 ,这 些 可 复 


用 的 构件 都 分 别 进行 了 合格 性 确认 ,并 且 被 打 成 一 
个 包 。 如 果 是 这 种 情况 , WebApp 的 测试 就 集中 在 
图 12-2 所 示 的 客户 层 与 头 两 个 服务 器 层 (WebApp 和 数据 转换 ) 之 间 交 互 的 测试 用 例 的 
设计 。 

应 该 对 用 户 界面 层 进行 测试 ,确保 对 每 一 个 用 户 查询 都 正确 地 构造 了 HTML 脚本 ， 
并 且 正 确 地 传输 给 服务 器 端 。 还 应 该 对 服务 器 端的 WebApp 层 进 行 测试 ,确保 能 够 从 
HTML 脚本 中 正确 地 抽取 出 用 户 数据 ,并 且 正确 地 传输 给 服务 器 端的 数据 转换 层 。 


图 12-2 交互 层 
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应 该 对 数据 转换 功能 进行 测试 ,确保 创建 了 正确 的 SQL, 并 且 传 给 合适 的 数据 管理 
构件 。 


12.3 界面 测试 


在 Web 系统 开发 过 程 中 ,需要 在 3 个 阶段 对 WebApp 的 用 户 界面 进行 验证 与 确认 。 
在 需求 分 析 阶 段 ,对 界面 模型 进行 评审 ,确保 与 利益 相关 者 的 需求 及 分 析 模型 的 其 他 元 素 
相 一 致 ;在 设计 阶段 ,对 界面 设计 模型 进行 评审 ,确保 已 经 达到 了 为 所 有 用 户 界 面 建立 的 
通用 质量 标准 ,并 且 正 确 描述 了 特定 于 应 用 系统 的 界面 设计 问题 ;由 于 用 户 交 互 是 通过 界 
面 的 语法 和 语义 来 表示 的 ,在 测试 阶段 ,重点 转移 到 特定 于 应 用 系统 的 用 户 交互 方面 的 执 
行 。 另 外 ,测试 提供 了 对 可 用 性 的 最 终 评 估 。 


12.3.1 界面 测试 策略 


界面 测试 检查 用 户 界面 的 交互 机 制 , 并 从 美学 角度 对 用 户 界面 进行 确认 。 界 面 测试 
的 总 体 测试 策略 是 : @ 发 现 与 特定 的 界面 机 制 相关 的 错误 (例如 ,未 能 正确 执行 菜单 链接 
的 错误 ,或 者 输入 数据 格式 的 错误 ); @ 发 现 界面 实现 导航 语义 方式 的 错误 .WebApp 的 
功能 性 错误 或 内 容 显示 错误 。 为 了 实现 此 策略 ,必须 启动 下 面 的 一 些 战术 步骤: 
对 界面 要 素 进 行 测试 ,确保 设计 规则 、 美 学 和 相关 的 可 视 化 内 容 对 用 户 有 效 , 且 没 
有 错误 。 要 素 包括 字体 、 颜 色 ,框架 ,图 片 .边界 . 表 以 及 WebApp 运行 中 所 产生 
的 相关 元 素 。 
采用 与 单元 测试 类 似 的 方式 测试 单个 界面 机 制 。 例 如 ,设计 测试 用 例 对 所 有 的 表 
单 、 客 户 端 脚本 动态 HTML、 脚 本 、 流 内 容 及 应 用 系统 的 特定 界面 机 制 (例如 电 
子 商务 应 用 系统 中 的 购物 车 ) 进 行 测试 。 在 很 多 情况 下 ,测试 可 以 专门 集中 在 这 
些 机 制 中 的 一 个 ,而 不 包括 其 他 界面 要 素 及 功能 。 
对 于 特殊 的 用 户 类 ,在 用 例 或 导航 语义 单元 的 环境 中 测试 每 一 种 界面 机 制 。 这 种 
测试 与 集成 测试 类 似 , 因 为 当 界面 机 制 被 集成 到 一 起 使 得 用 例 执 行 时 ,才能 够 进 
行 测试 。 
与 选择 用 例 有 所 不 同 , 此 方法 要 对 所 有 界面 进行 测试 ,发 现 界面 的 语义 错误 。 这 
种 测试 类 似 于 确认 测试 ,因为 其 目的 是 证 明 与 特定 的 用 例 语义 相 一 致 。 正 是 在 这 
个 阶段 ,进行 一 系列 的 可 用 性 测试 。 
在 多 种 环境 (例如 浏览 器 ) 中 对 界面 进行 测试 ,确保 其 兼容 性 。 实 际 上 ,可 以 将 这 
一 系列 测试 看 成 是 配置 测试 的 一 部 分 。 


12.3.2 测试 界面 机 制 


当 用 户 与 WebApp 交互 时 ,通过 一 种 或 多 种 界面 机 制 发 生 交互 ,测试 时 需要 考虑 的 
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链接 。 对 每 个 导航 链接 进行 测试 ,确保 获得 了 正确 的 内 容 对 象 或 功能 (这 些 测试 可 以 
作为 界面 测试 或 导航 测试 的 一 部 分 )。Web 工程 师 构建 与 界面 布局 (例如 ,菜单 条 、 索 引 
项 ) 相 联系 的 所 有 链接 列表 ,然后 分 别 运行 每 个 链接 。 另 外 .一定 要 执行 每 个 内 容 对 象 内 
的 链接 ,发 现 错误 的 统一 资源 定位 符 URL 或 者 链接 到 不 正确 的 内 容 对 象 或 功能 。 最 后 ， 
应 该 对 链接 到 外 部 WebApp 的 链接 进行 精确 性 测试 ,并 且 对 其 进行 估计 ,决定 随 着 时 间 
的 推移 这 些 链接 将 变 得 无 效 的 风险 有 多 大 。 

表单 。 在 宏观 层次 上 进行 测试 ,以 确保 : 对 表单 中 的 标识 域 给 出 正确 标记 ,并 且 为 
用 户 可 视 化 地 标识 出 强制 域 ; @ 服 务 器 接收 到 了 表单 中 包括 的 所 有 信息 ,并 且 在 客户 端 
与 服务 器 之 间 的 传输 过 程 中 没有 数据 丢失 ; @ 当 用 户 没有 从 下 拉 菜 单 或 按钮 组 中 进行 选 
择 时 ,使 用 合适 的 缺 省 项 ; @ 浏 览 器 功能 (例如 “ 回 退 "箭头 ) 没 有 破坏 输入 到 表单 中 的 数 
据 ; @ 执 行 对 输入 数据 进行 错误 检查 的 脚本 工作 正常 ,并 且 提供 了 有 意义 的 错误 信息 。 

在 更 具有 目标 性 的 层次 上 ,测试 应 该 确保 : 四 表单 域 有 合适 的 宽度 和 数据 类 型 ; @ 
表单 建立 了 合适 的 安全 措施 ,防止 用 户 输入 的 文本 字符 串 长 度 大 于 预先 定义 的 最 大 值 ; 
四 对 下 拉 菜 单 中 的 所 有 合适 的 选项 进行 详细 说 明 ,并 按照 对 最 终 用 户 有 意义 的 方式 排序 ， 
@ 浏 览 器 “自动 填充 ”特性 不 会 导致 数据 输入 错误 ; @OTab 键 (或 其 他 键 ) 能 够 使 输入 焦点 
在 表单 域 之 间 正 确 移动 。 

客户 端 脚本 。 当 脚本 运行 时 ,使 用 黑 盒 测试 发 现 处 理 中 的 一 些 错误 。 由 于 脚本 输入 
通常 来 自作 为 表单 处 理 组 成 部 分 所 提供 的 数据 ,这 些 测试 通常 与 表单 测试 联合 进行 。 应 
该 进行 兼容 性 测试 ,确保 所 选择 的 脚本 语言 在 支持 WebApp 的 环境 配置 中 工作 正常 。 另 
外 ,还 要 测试 脚本 本 身 。 

动态 HTML。 和 运行 包含 动态 HTML 的 每 一 个 网 页 ,确保 动态 显示 正确 。 另 外 ,应 该 
进行 兼容 性 测试 ,确保 动态 HTML 在 支持 WebApp 的 环境 配置 中 正常 工作 。 每 当 流 行 
的 浏览 器 的 新 版 本 发 布 时 都 应 该 重新 进行 客户 端 脚本 的 测试 及 与 动态 HTML 相关 的 
测试 。 

弹出 窗口 。 进 行 一 系列 测试 ,以 确保 : 弹出 窗口 具有 合适 的 大 小 和 位 置 ; @ 弹 出 
窗口 没有 获 盖 原始 的 WebApp 窗口 ;@ 弹 出 窗口 的 美学 设计 与 界面 的 美学 设计 相 一 致 ; 
@ 附 加 到 弹出 窗口 上 的 滚动 条 和 其 他 控制 机 制 被 正确 定位 ,并 具有 所 需 的 功能 。 

CGI 脚本。 一 旦 接收 到 经 过 验证 的 数据 , 黑 盒 测试 的 侧重 点 将 集中 在 数据 的 完整 性 
( 当 数 据 被 传递 给 CGI 脚本 时 ) 和 脚本 处 理 上 。 此 外 ,进行 性 能 测试 ,确保 服务 器 端的 配 
置 符合 CGI 脚本 多 重 调用 的 处 理 要 求 。 

流 内 容 。 测 试 应 该 证 明 流 数据 是 最 新 的 .显示 正确 .能 够 无 错误 地 暂停 ,并 且 很 容易 
重新 启动 。 

Cookies。 服 务 器 端 和 客户 端的 测试 都 是 需要 的 。 在 服务 器 端 ,测试 应 该 确保 一 个 
Cookie 被 正确 构造 (包含 正确 的 数据 ) ,并 且 当 请 求 特定 的 内 容 和 功能 时 ,此 Cookie 能 够 
被 正确 地 传输 到 客户 端 。 此 外 ,测试 此 Cookie 是 否 具 有 合适 的 持久 性 ,确保 有 效 日 期 正 
确 。 在 客户 端 ,用 测试 来 确定 WebApp 是 否 将 已 有 的 Cookie 正确 地 附 到 了 特定 的 请 求 
上 (发 送 给 服务 器 ) 。 

特定 应 用 系统 的 界面 机 制 。 测 试 是 否 与 界面 机 制定 义 的 功能 和 特性 清单 相符 合 。 例 
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如 ,为 电子 商务 应 用 系统 中 所 定义 的 购物 车 功能 提出 下 面 的 检查 清单 : 
。 对 能 够 放置 到 购物 车 中 的 物品 的 最 小 数量 和 最 大 数量 进行 边界 测试 。 
。 对 一 个 空 的 购物 车 的 “结账 ”请求 进行 测试 。 
。 测试 从 购物 车 中 正确 地 删除 一 件 物品 。 
。 测试 一 次 购买 操作 是 否 清空 了 购物 车 中 的 内 容 。 
。 测试 购物 车 内 容 的 持久 性 (这 一 点 应 该 作为 客户 需求 的 一 部 分 详细 说 明 ) 。 
。 测试 WebApp 将 来 某 个 日 期 是 否 能 够 记 起 购物 车 的 内 容 ( 假 设 没 有 购买 活动 
发 生 ) 。 


12.3.3 测试 界面 语义 


一 旦 对 每 一 个 界面 功能 都 进行 了 “单元 ”测试 ,就 可 以 将 界面 测试 的 关注 点 转移 到 界 
面 的 语义 测试 。 界 面 的 语义 测试 是 要 “评价 设计 在 照顾 用 户 ,提供 清楚 的 指导 ,传递 反馈 
并 保持 语言 与 方法 的 一 致 性 方面 做 得 如 何 ”。 

一 旦 实现 了 WebApp, 就 应 该 对 每 个 用 例 场景 (针对 每 一 类 用 户 ) 进 行 测试 。 本 质 上 ， 
用 例 就 变 成 了 设计 测试 序列 的 输入 。 测 试 序列 的 目的 是 发 现 那些 妨碍 用 户 获 得 与 用 例 相 
关 的 目标 的 错误 。 

Web 开发 团队 需要 维护 一 份 检查 单 ,确保 每 个 菜单 项 都 至 少 被 运行 一 次 ,并 且 内 容 
对 象 中 的 每 个 髋 入 的 链接 都 已 经 使 用 。 此 外 ,测试 序列 应 该 包括 不 适当 的 菜单 选择 和 链 
接 使 用 ,目的 是 确定 WebApp 是 否 提 供 了 有 效 的 错误 处 理 和 恢复 。 


12.3.4 可 用 性 测试 


可 用 性 测试 也 评价 用 户 在 多 大 程度 上 能 够 与 WebApp 进行 有 效 交互 ,WebApp 在 多 
大 程度 上 指导 用 户 行为 .提供 有 意义 的 反馈 。 从 这 种 意义 上 说 ,可 用 性 测试 与 界面 语义 测 
试 是 相似 的 。 可 用 性 检查 和 测试 不 是 集中 在 某 交 互 目标 的 语义 上 ,而 是 要 确定 WebApp 
界面 在 多 大 程度 上 使 用 户 的 生活 变 得 轻松 ( 即 用 户 友好 性 ) 。 

可 用 性 测试 可 以 由 测试 人 员 设 计 , 但 是 测试 本 身 由 最 终 用 户 进行 。 在 测试 时 ,可 以 采 
用 以 下 步 又 : 

(1) 定义 一 组 可 用 性 测试 类 别 , 并 确定 每 类 测试 的 目标 。 

(2) 设计 测试 ,使 其 能 够 评估 每 个 目标 。 

(3) 选择 将 执行 测试 的 参与 者 。 

(4) 当 进 行 测试 时 ,指导 参与 者 与 WebApp 交互 。 

(5) 开发 一 种 机 制 来 评估 WebApp 的 可 用 性 。 

可 用 性 测试 可 能 发 生 在 多 种 不 同 的 抽象 级 别 : 对 特定 的 界面 机 制 (例如 ,表单 ) 的 
可 用 性 进行 评估 ; @@ 对 所 有 网 页 (包括 界面 机 制 、 数 据 对 象 及 相关 的 功能 ) 的 可 用 性 进行 
评估 ; @ 考 虑 整个 WebApp 的 可 用 性 。 

作为 一 个 例子 ,我 们 考虑 对 交互 和 界面 机 制 进行 可 用 性 评估 。 建 议 应 该 对 下 列 界面 
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要 素 进 行 可 用 性 评审 和 测试 : 动画 ,按钮 .颜色 、 控 制 . 对 话 、 域 .表单 框架、 图 形 、 标 签 、 链 
接 、 菜 单 、 消 息 、 导 航 、 页 .选择 器 文本 和 工具 条 。 当 评估 每 个 要 素 时 ,可 以 由 执行 测试 的 
用 户 对 其 进行 定性 分 级 。 图 12-3 描述 了 用 户 可 能 选择 的 一 系列 评估 “级 别 ”。 这 些 级 别 
可 以 应 用 于 每 个 单独 的 要 素 、 所 有 的 网 页 或 者 整个 WebApp。 
易 用 性 人 
吕 易学 习性 
Q 有 效 
中 简单 
难 使 用 O 
难 学 习 O 包含 信息 
易 误 解 〇 糊涂 


不 -至 
-5 
2 洒 有 全- 可 天 言 性 


图 12-3 可 用 性 的 定性 评估 


12.3.5 兼容 性 测试 


不 同 的 计算 机 、 显 示 设 备 、 操 作 系统 、 浏 览 器 和 网 络 连接 速度 都 会 对 WebApp 的 运行 
造成 影响 。 每 一 种 配置 都 可 能 使 客户 端的 处 理 速度 .显示 分 辨 率 和 连接 速度 有 所 不 同 。 
操作 系统 反复 无 常 的 行为 可 能 导致 WebApp 的 处 理 问题 。 不 管 WebApp 中 HTML 的 
标准 化 程度 如 何 ,不 同 的 浏览 器 有 时 会 产生 稍微 不 同 的 结果 。 

在 某 些 情况 下 ,小 的 兼容 性 问题 显得 不 是 很 严重 ,而 在 有 些 情况 下 ,就 可 能 遇 到 严重 
的 错误 。 例 如 ,下 载 速度 可 能 变 得 不 能 接受 ,缺少 所 需要 的 捅 件 可 能 使 内 容 难以 获得 , 浏 
览 器 的 不 同 可 能 会 戏剧 性 地 改变 页 面 的 布局 , 字 型 可 能 会 被 改变 、. 且 变 得 难以 辨认 ,或 者 
表单 可 能 被 错误 地 组 织 。 兼 容 性 测试 试图 在 WebApp 上 线 前 发 现 这 些 问 题 。 

兼容 性 测试 的 第 一 步 是 定义 一 组 “通常 遇 到 ?的 客户 端 计算 配 置 和 它们 的 变型 。 实 际 
做 法 是 创建 一 种 树 结构 ,并 在 上 面 标识 每 一 种 计算 平台 、 典 型 的 显示 设备 .此 平台 支持 的 
操作 系统 .可 用 的 浏览 器 .可 靠 的 因特网 连接 速度 及 类 似 信 息 。 下 一 步 ,导出 一 系列 兼容 
性 确认 测试 ,可 以 从 现 有 的 界面 测试 .导航 测试 .性 能 测试 和 安全 性 测试 中 导出 。 这 些 测 
试 的 目的 是 发 现 由 于 配置 差异 所 导致 的 错误 和 运行 问题 。 


12.4 构件 测试 


构件 级 测试 也 称 功能 测试 , 它 集中 于 一 系列 的 测试 ,试图 发 现 WebApp 功能 方面 的 
错误 。 每 个 WebApp 功能 都 是 一 个 软件 构件 (用 编程 语言 或 脚本 语言 之 一 实现 的 ) ,并 且 
可 以 用 黑 盒 (及 在 某 些 情况 下 的 白 盒 ) 技 术 对 其 进行 测试 。 
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构件 测试 用 例 通常 受 表单 级 的 输入 驱动 。 一 旦 定义 了 表单 数据 ,用 户 就 可 以 选择 按 
钮 或 其 他 控制 机 制 来 启动 运行 。 下 面 是 典型 的 测试 用 例 设计 方法 : 

。 等 价 类 划分 一 一 将 功能 的 输入 域 划 分 为 输入 种 类 或 输入 类 ,可 以 从 这 些 输入 类 中 
导出 测试 用 例 。 通 过 对 输入 表单 进行 评估 ,可 以 决定 哪些 数据 类 与 功能 有 关 。 对 
于 每 个 输入 类 ,都 导出 它 的 测试 用 例 并 运行 ,而 其 他 输入 类 保持 不 变 。 例 如 ,一 个 
电子 商务 系统 可 能 实现 计算 运输 费用 的 功能 。 在 通过 表单 提供 的 多 种 运输 信息 
中 有 用 户 的 邮政 编码 ,就 可 以 设计 测试 用 例 , 通 过 详细 说 明 邮 政 编码 的 值 试图 发 
现 邮政 编码 处 理 中 的 错误 ,这 种 方法 可 以 发 现 不 同 的 错误 类 (例如 不 完整 的 邮政 
编码 不 正确 的 邮政 编码 或 不 存在 的 邮政 编码 ) 。 
边界 值 分 析 一 一 对 表单 数据 的 边界 进行 测试 。 例 如 ,前 面 提 到 的 运费 计算 功能 需 
要 指出 产品 运输 所 需要 的 最 大 天 数 , 在 表单 中 记录 的 最 少 天 数 是 2 天 ,最 大 天 数 
是 14 天 。 然 而 边界 值 测试 可 能 输入 值 0、1、2、13、14 和 15, 来 确定 功能 如 何 对 有 
效 输入 边界 之 内 、 之 外 及 边界 点 的 数据 做 出 反应 。 在 这 种 情况 下 ,一 个 较 好 的 输 
入 设计 会 排除 潜在 的 错误 ,例如 最 大 天 数 可 以 从 下 拉 菜单 中 选择 ,从 而 排除 用 户 
指定 超出 范围 的 输入 。 

路 径 测试 一 一 如 果 功 能 的 逻辑 复杂 性 较 高 (可 以 通过 计算 算法 的 环 复杂 性 来 确 
定 )。 可 以 使 用 路 径 测试 ( 白 盒 测 试用 例 设计 方法 ) 来 确保 程序 中 的 每 条 独立 路 径 
都 被 执行 。 

除了 这 些 测试 用 例 设 计 方法 ,还 可 以 使 用 称 为 强制 错误 测试 的 技术 导出 测试 用 例 ,这 
些 测 试用 例 故意 使 WebApp 构件 进入 错误 条 件 , 目 的 是 发 现 错误 处 理 过 程 中 发 生 的 错误 
(例如 ,不 正确 或 不 存在 的 错误 提示 信息 ,由 错误 的 发 生 导 致 WebApp 的 失败 ,由 错误 的 
输入 而 导致 的 错误 输出 ,与 构件 处 理 有 关 的 副作用 )。 

每 个 构件 级 测试 用 例 详 细 说 明了 所 有 的 输入 值 和 由 构件 提供 的 预期 输出 。 将 测试 过 
程 中 产生 的 实际 输出 数据 记录 下 来 ,以 供 将 来 的 支持 和 维护 阶段 参考 。 

在 很 多 情况 下 , WebApp 功能 的 正确 运行 依赖 于 与 数据 库 的 正确 接口 ,其 中 数据 库 
可 能 位 于 WebApp 的 外 部 。 因 此 ,数据 库 测试 是 构件 测试 领域 中 不 可 分 割 的 一 部 分 。 


12.5 导航 测试 


用 户 在 WebApp 中 浏览 时 都 有 一 系列 的 目标 ,在 这 种 意义 上 ,这 种 导航 过 程 是 可 预 
测 的 。 同 时 ,导航 过 程 又 可 能 是 无 法 预测 的 ,因为 访问 者 受到 他 所 看 到 的 或 学 到 的 某 件 事 
的 影响 ,可 能 选择 一 条 路 径 或 启动 一 个 动作 ,而 这 对 于 最 初 的 目标 并 不 是 典型 的 路 径 或 动 
作 。 导 航 测试 的 工作 是 : 

(1) 确保 允许 WebApp 用 户 经 由 WebApp 游历 的 机 制 都 是 功能 性 的 ; 

(2) 确认 每 个 导航 语义 单元 都 能 够 被 合适 的 用 户 类 获得 。 
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12.5.1 测试 导航 语法 


实际 上 ,导航 测试 的 第 一 个 阶段 在 界面 测试 期 间 就 开始 了 。 应 对 导航 功能 进行 测试 ， 
以 确保 每 个 导航 都 执行 了 预计 的 功能 。 建 议 应 该 对 下 面 的 每 个 导航 功能 进行 测试 ; 
。 导 航 链接 一 一 WebApp 中 的 内 部 链接 到 其 他 WebApp 的 外 部 链接 及 特定 网 页 中 
的 锚 都 应 该 被 测试 ,确保 选择 链接 时 ,能够 获得 正确 的 内 容 和 功能 。 
。 重 定向 当 用 户 请 求 一 个 不 存在 的 URL、 选 择 的 目标 地 址 已 经 被 移 走 或 者 名 
字 已 经 被 改变 的 链接 时 ,就 会 用 到 这 些 重 定向 的 链接 。 应 该 给 用 户 显 示 一 条 提示 
信息 ,并 且 将 导航 重 定 向 到 另 一 页 (例如 ,主页 )。 通 过 请 求 不 正确 的 内 部 链接 或 
外 部 URL, 并 且 评 价 WebApp 如 何 处 理 这 些 请 求 ,来 对 重 定 向 进行 测试 。 
。 书 签 一 一 对 WebApp 进行 测试 ,确保 当 创建 一 个 书签 时 ,能 够 抽取 出 有 意义 的 页 
标题 。 
框架 和 框架 集 一 一 每 个 框架 包含 特定 的 网 页 内 容 ,一 个 框架 集 包含 多 个 框架 ,并 
且 可 以 使 多 个 网 页 同时 显示 。 由 于 框架 和 框架 集 彼此 之 间 可 以 嵌 套 ,应 该 对 这 些 
导航 和 显示 机 制 进行 内 容 的 正确 性 、 合 适 的 布局 和 大 小 .下 载 性 能 和 浏览 器 兼容 
性 方面 的 测试 。 
。 站 点 地 图 一 一 站 点 地 图 提供 了 所 有 网 页 内 容 的 完整 列表 ,应 该 对 每 个 站 点 地 图 的 
入 口 进行 测试 ,确保 链接 引导 用 户 到 达 合 适 的 内 容 或 功能 。 
内 部 搜索 引擎 一 一 复杂 的 WebApp 通常 包括 成 百 上 千 的 内 容 对 象 。 内 部 搜索 引 
擎 允许 用 户 在 WebApp 中 搜索 关键 字 ,来 发 现 所 需要 的 内 容 。 搜 索引 擎 测试 确 
认 搜 索 的 准确 性 和 完备 性 、 搜 索引 擎 的 错误 处 理 特性 及 高 级 的 搜索 特性 (例如 ,在 
搜索 域 中 布尔 操作 符 的 使 用 ) 。 


12.5.2 测试 导航 语义 


导航 语义 单元 (NSU) 被 定义 为 “一 组 信息 和 相关 的 导航 结构 ,在 完成 相关 的 用 户 需 
求 的 子 集 时 ,这 些 导 航 结构 会 相互 协作 ”。 每 个 NSU 由 一 系列 连接 导航 节点 (例如 ,网 
页 .内容 对 象 或 功能 ) 的 导航 路 径 定义 。 作 为 一 个 整体 ,每 个 NSU 允许 用 户 获 得 特殊 的 
需求 ,这 种 特殊 的 需求 是 针对 某 类 用 户 ,由 一 个 或 多 个 用 例 定义 的 。 导 航 测试 应 检查 每 个 
NSU ,以 确保 能 够 获得 这 些 需求 。 

在 测试 每 个 NSU 时 ,Web 工程 团队 要 回答 下 面 的 问题 : 

。 此 NSU 是 否 没有 错误 地 全 部 完成 了 ? 

。 在 为 此 NSU 定义 的 导航 路 径 的 上 下 文中 ,每 个 导航 节点 是 否 都 是 可 达 的 ? 

。 如 果 使 用 多 条 导航 路 径 都 能 完成 此 NSU, 每 条 相关 的 路 径 是 否 都 已 经 被 测试 ? 

。 如 果 使 用 用 户 界 面 提供 的 指导 来 帮助 导航 , 当 导 航 进 行 时 ,方向 正确 并 可 理解 吗 ? 

。 是 否 具有 返回 到 前 一 个 导航 节点 及 导航 路 径 开 始 位 置 的 机 制 ( 不 同 于 浏览 器 的 

“ 回 退 ?箭头 )? 
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一 个 长 的 网 页 导航 节点 中 的 导航 机 制 工作 正常 吗 ? 
如 果 一 个 功能 在 一 个 节点 上 和 运行, 并且 用 户 选择 不 提供 输入 ,NSU 的 剩余 部 分 能 
完成 吗 ? 
如 果 一 个 功能 在 一 个 节点 上 运行 ,并 且 在 功能 处 理 时 发 生 了 一 个 错误 ,NSU 能 完 
成 吗 ? 
在 到 达 所 有 节点 之 前 ,是 否 有 办 法 终止 导航 ? 然后 又 能 返回 到 导航 被 终止 的 地 
方 ,并 从 那里 继续 ? 
从 站 点 地 图 可 以 到 达 每 个 节点 吗 ? 节点 的 名 字 对 最 终 用 户 有 意义 吗 ? 
如 果 可 以 从 某 外 部 的 信息 源 到 达 NSU 中 的 一 个 节点 ,推移 到 导航 路 径 的 下 一 个 
节点 可 能 吗 ? 返回 到 导航 路 径 的 前 一 个 节点 可 能 吗 ? 
当 运行 NSU 时 ,用 户 知道 他 在 内 容 体系 结构 中 所 处 的 位 置 吗 ? 

如 同 界面 测试 和 可 用 性 测试 ,导航 测试 应 该 由 尽 可 能 多 的 不 同 的 支持 者 进行 。 测 试 
的 早期 阶段 由 Web 工程 师 进行 ,但 后 来 的 测试 应 该 由 其 他 项 目 利益 相关 者 、 独 立 的 测试 
团队 进行 ,最 后 应 该 由 非 技术 用 户 进行 ,目的 是 彻底 检查 WebApp 导航 。 


12.6 配置 测试 


配置 的 可 变性 和 不 稳定 性 是 使 Web 工程 面临 挑战 的 重要 因素 。 硬 件 、 操 作 系 统 、 浏 
览 器 ,存储 容量 、 网 络 通信 速度 和 多 种 其 他 客户 端 因素 对 每 个 用 户 都 是 难以 预料 的 。 另 
外 , 某 个 用 户 的 配置 可 能 会 有 规律 地 改变 (例如 ,操作 系统 升级 、 新 的 界面 分 离 原则 、ISP 
和 连接 速度 ) ,其 结果 可 能 是 客户 端 环境 容易 出 错 ,这 些 错 误 既 微妙 又 重要 。 如 果 两 个 用 
户 不 是 在 相同 的 客户 端 配置 中 工作 ,一 个 用 户 对 WebApp 的 印象 及 与 WebApp 的 交互 方 
式 可 能 与 另 一 个 用 户 的 体验 有 很 大 不 同 。 

配置 测试 的 工作 不 是 去 检查 每 一 个 可 能 的 客户 端 配置 ,而 是 测试 一 组 很 可 能 的 客户 
端 和 服务 器 端 配置 ,确保 用 户 在 所 有 配置 中 的 体验 都 是 一 样 的 ,并 且 将 针对 特殊 配置 的 错 
误 分 离 出 来 。 


12.6.1 服务 器 端 问题 


在 服务 器 端 ,配置 测试 用 例 以 验证 所 计划 的 服务 器 配置 ( 即 WebApp 服务 器 、 数 据 库 
服务 器 、 操 作 系统 、 防 火 墙 软件 .并 发 应 用 系统 ) 能 够 支持 WebApp, 而 不 会 发 生 错 误 。 实 
质 上 ,WebApp 被 安装 在 服务 器 端 环 境 , 并 进行 测试 ,目的 是 发 现 与 配置 有 关 的 错误 。 

当 设计 服务 器 端的 配置 测试 时 , Web 工程 师 应 该 考虑 服务 器 配置 的 每 个 构件 。 在 服 
务 器 端的 配置 测试 期 间 ,需要 询问 及 回答 以 下 问题 : 

。 WebApp 与 服务 器 操作 系统 完全 兼容 吗 ? 

。 当 WebApp 运行 时 ,系统 文件 .目录 和 相关 的 系统 数据 是 否 正确 创建 ? 

。 系统 安全 措施 (例如 ,防火 墙 或 加 密 ) 人 允许 WebApp 运行 ,并 对 用 户 提供 服务 ,而 不 

发 生 冲 突 或 性 能 下 降 吗 ? 


266 


测试 Web 应 用 系统 


是 否 已 经 利用 所 选择 的 分 布 式 服务 器 配置 (如 果 存 在 一 种 配置 ) 对 WebApp 进行 
了 测试 ? 例如 ,可 能 使 用 单独 的 应 用 服务 器 和 数据 库 服务 器 ,两 台 机 器 之 间 通 过 
网 络 连接 进行 通信 。 

此 WebApp 是 否 与 数据 库 软 件 进行 了 适当 的 集成 ?” 是 否 对 数据 库 的 不 同 版 本 
敏感 ? 

服务 器 端的 WebApp 脚本 运行 正常 吗 ? 

系统 管理 员 错 误 对 WebApp 运行 的 影响 是 否 已 经 得 到 检查 ? 

如 果 使 用 了 代理 服务 器 ,在 站 点 测试 时 ,是 否 已 经 明确 这 些 代 理 服务 器 在 配置 方 
面 的 差异 ? 


12.6.2 客户 端 问题 


在 客户 端 ,配置 测试 更 多 地 集中 在 WebApp 与 配置 的 兼容 性 方面 ,这 些 配 置 包括 下 
面 构件 的 一 种 或 多 种 的 改变 : 

。 硬件 一 -CPU .内存 、 存 储 器 和 打印 设备 。 

。 操作 系统 一 一 Linux、IOS、Microsoft Windows、 基 于 移动 的 操作 系统 。 

。 浏览 器 软件 一 一 例如 IE 或 其 他 浏览 器 。 

。 用 户 界 面 构件 一 一 Active X Java Applets 及 其 他 构件 。 

。 插件 一 一 QuickTime、RealPlayer 及 很 多 其 他 插件 。 

。 连通 一 一 电缆 、DSL、 常 规 的 调制 解 调 器 、Wi-Fi。 

除了 这 些 构件 ,其 他 配置 变量 包括 网 络 软件 、ISP 的 难以 预测 的 变化 及 并 发 运行 的 应 
用 系统 。 

为 了 设计 客户 端 配置 测试 , Web 工程 团队 必须 将 配置 变量 的 数量 减少 到 可 管理 的 数 
目 , 因 为 在 每 一 种 可 能 的 配置 构件 的 组 合 中 运行 测试 是 非常 耗费 时 间 的 。 为 了 实现 这 一 
点 ,要 对 每 类 用 户 进行 评估 ,以 确定 此 类 用 户 可 能 遇 到 的 配置 。 此 外 ,工业 市 场 上 的 共享 
数据 可 以 用 来 预测 最 可 能 的 构件 组 合 , 然 后 ,在 这 些 环境 中 测试 WebApp。 


12.7 安全 测试 


随 着 因特网 的 普及 ,网 上 购物 、 网 上 交易 、 电 子 银行 等 新 的 交易 方式 走 进入 们 的 生活 ， 
同时 网 络 安全 越 来 越 不 容 忽视 。 在 Web 应 用 中 ,通常 要 使 用 Web 网 页 面 来 传送 一 些 寻 
要 的 信息 ,如 信用 卡 信息 、 用 户 资料 信息 等 ,一 旦 这 些 信息 因 Web 应 用 系统 的 漏洞 而 被 黑 
客 捕获 ,后 果 将 不 堪 设 想 。 

应 该 设计 安全 性 测试 去 探查 在 某 些 方面 所 存在 的 弱点 ,比如 客户 端 环境 、 当 数据 从 客 
户 端 传 到 服务 器 并 从 服务 器 再 传 回 客户 端 时 所 发 生 的 网 络 通信 以 及 服务 器 端 环境 。 这 些 
领域 中 的 每 一 个 都 可 能 会 受到 心怀 恶意 的 人 的 攻击 。 

在 客户 端 , 弱 点 通常 可 以 追溯 到 存在 于 浏览 器 .电子 邮件 程序 或 通信 软件 中 的 缺陷 。 
一 个 典型 的 安全 漏洞 是 缓冲 区 溢出 ,这 种 缺陷 使 得 恶意 代码 能 够 在 客户 端 机 器 上 运行 。 


网 
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例如 ,向 浏览 器 中 输入 的 URL 长 度 远 远大 于 为 URL 分 配 的 缓冲 区 容量 ,如 果 浏 览 器 没 
有 错误 探测 代码 来 确认 输入 的 URL 的 长 度 , 则 会 导致 内 存 重 写 ( 缓 冲 区 溢出 ) 错 误 。 经 
验 丰 富 的 电脑 黑客 能 够 聪明 地 利用 这 种 缺陷 ,通过 写 一 个 带 有 可 运行 代码 的 很 长 的 
URL ,使 浏览 器 毁坏 或 改变 安全 性 设置 (从 高 到 低 ) ,或 者 在 最 坏 的 情况 下 破坏 用 户 数 据 。 

对 客户 端的 另 一 个 可 能 的 攻击 是 对 放置 在 浏览 器 中 的 cookie 的 未 被 授权 的 访问 。 
怀 有 恶意 创建 的 站 点 能 够 获取 包含 在 合法 的 cookie 中 的 信息 ,并 且 用 此 信息 危害 用 户 的 
隐私 ,或 者 更 糟糕 的 是 为 偷窃 行为 设置 舞台 。 

客户 和 服务 器 之 间 通 信 的 数据 易 受 电 子 欺 骗 行 为 的 攻击 , 当 通 信 路 径 的 一 端 被 怀 有 
恶意 的 实体 暗中 破坏 时 ,电子 欺骗 行为 就 发 生 了 。 例 如 ,用 户 会 被 恶意 的 网 站 所 欺骗 , 它 
看 起 来 好 像 是 合法 的 WebApp 服务 器 (与 合法 的 WebApp 服务 器 具有 相同 的 外 观 ) ,其 目 
的 是 窃取 密码 .私有 信息 或 信用 数据 。 

在 服务 器 端 ,薄弱 环节 包括 拒绝 服务 攻击 和 恶意 脚本 ,这些 恶 意 脚本 可 以 传送 到 客户 
端 ,或 者 用 来 使 服务 器 操作 丧失 能 力 。 另 外 ,服务 器 端 数据 库 能 够 在 没有 授权 的 情况 下 被 
访问 (数据 窃取 ) 。 

在 Web 的 安全 性 测试 中 ,通常 需要 实现 以 下 一 种 或 多 种 安全 机 制 ; 

。 防火 墙 一 一 是 硬件 和 软件 相 结合 的 过 滤 机 制 , 它 检查 每 一 个 进来 的 信息 包 , 确 保 

信息 包 来 自 合 法 的 信息 源 ,阻止 任何 可 疑 的 数据 。 

。 鉴别 一 一 确认 所 有 客户 和 服务 器 身份 的 一 种 验证 机 制 ,只 有 当 两 端 都 通过 了 检验 

才 允 许 通信 。 

一 般 的 应 用 站 点 都 会 使 用 登录 或 者 注册 后 使 用 的 方式 ,因此 ,必须 对 用 户 名 和 匹配 的 
密码 进行 校 验 ,以 阻止 非法 用 户 登 录 。 在 进行 登录 测试 的 时 候 , 需 要 考虑 输入 的 密码 是 否 
大 小 写 敏 感 .是 否 有 长 度 和 条 件 限 制 ,最 多 可 以 尝试 多 少 次 登录 ,哪些 页 面 或 者 文件 需要 
登录 后 才能 访问 /下 载 等 。 身 份 验证 还 包括 调用 者 身份 ,数据库 的 不 同 访问 身份 ,用户 授 
权 等 ,并 区 分 公共 访问 和 受 限 访问 ,以 及 受 限 访问 的 资源 。 

。 加 密 一 一 保护 敏感 数据 的 一 种 编码 机 制 。 通 过 对 敏感 数据 进行 信息 加 密 和 过 滤 

后 , 才 在 客户 端 和 服务 器 之 间 进 行 传输 ,包括 用 户 登录 密码 、 信 用 卡 信息 等 。 进 行 
某 种 方式 的 修改 ,使 得 怀 有 恶意 的 人 不 能 读 懂 。 通 过 使 用 数字 证 书 ,加 密 得 到 了 
增强 ,因为 数字 证 书 允许 客户 对 数据 传输 的 目标 地 址 进行 检验 。 
例如 ,在 登录 某 银行 网 站 时 ,该 网 站 必须 支持 SSL 协议 ,通过 浏览 器 访问 该 网 站 时 ， 
地 址 栏 的 HTTP 变 成 HTTPS, 建 立 HTTPS 连接 。 这 相当 于 在 HTTP 协议 和 TCP 协 
议 之 间 增 加 了 一 层 加 密 一 一 SSL 协议 。SSL 是 利用 公开 密 钥 /私有 密 钥 的 加 密 技术 
(RSA) ,建立 用 户 与 服务 器 之 间 的 加 密 通信 ,确保 所 传递 信息 的 安全 性 。 数 据 加 密 的 安 
全 性 还 包括 加 密 的 算法 、 密 钥 的 安全 性 。 
。 授权 一 一 一 种 过 滤 机 制 , 只 有 对 那些 具有 合适 的 授权 码 (例如 ,用 户 身份 证 号 和 密 
码 ) 的 人 , 才 允 许 访问 客户 或 服务 器 环境 。 

。 超 时 限制 一 一 Web 应 用 系统 一 般 会 设 定 “ 超 时 ”限制 , 当 用 户 长 时 间 ( 如 15 分钟) 
不 做 任何 操作 时 ,需要 重新 登录 才能 打开 其 他 页 面 。 

。 操作 留 痕 一 一 为 了 保证 Web 应 用 系统 的 安全 性 ,日 志文 件 是 至 关 重 要 的 。 需 要 
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测试 相关 信息 是 否 写 人 了 日 志文 件 , 是 否 可 追踪 等 。 
12.8 性 能 测试 


人 性 能 问题 通常 可 能 是 由 以 下 原因 产生 的 : 服务 器 端 资源 缺乏 、 不 合适 的 网 络 带宽 、 不 
适当 的 数据 库容 量 \ 不 完善 或 不 强 的 操作 系统 能 力 、. 设 计 糟糕 的 WebApp 功能 以 及 可 能 
导致 客户 -服务 器 性 能 下 降 的 其 他 硬件 或 软件 问题 。 设 计 性 能 测试 的 目的 是 双重 的 : O 
了 解 系统 如 何 对 负载 ( 即 用 户 的 数量 ,事务 的 数量 或 总 的 数据 量 ) 增 加 做 出 反应 ; 四 收集 
度量 数据 ,这 些 数据 将 促使 修改 设计 ,从 而 使 性 能 得 到 改善 。 

设计 性 能 测试 用 来 模拟 现实 世界 的 负载 情形 。 随 着 同时 访问 WebApp 用 户 数量 的 
增加 ,在 线 事务 数量 或 数据 量 (下载 或 上 载 ) 也 随 之 增加 ,性 能 测试 将 帮助 回答 下 面 的 
问题 : 


服务 器 响应 时 间 是 否 降 到 了 值得 注意 的 或 不 可 接受 的 程度 ? 
在 什么 情况 下 (就 用 户 、 事 务 或 数据 负载 来 说 ) ,性 能 变 得 不 可 接受 ? 
哪些 系统 构件 应 对 性 能 下 降 负 责 ? 
在 多 种 负载 条 件 下 ,用户 的 平均 响应 时 间 是 多 少 ? 
性 能 下 降 是 否 影 响 系 统 的 安全 性 ? 
当 系统 的 负载 增加 时 , WebApp 的 可 靠 性 和 准确 性 是 否 会 受 影响 ? 
当 负载 大 于 服务 器 容量 的 最 大 值 时 ,会 发 生 什 么 情况 ? 
性 能 下 降 是 否 对 公司 的 收益 有 影响 ? 
为 了 回答 这 些 问 题 ,需要 进行 两 种 不 同 的 性 能 测试 : 
(1) 负载 测试 一 一 在 多 种 负载 级 别 和 多 种 组 合 下 ,对 真实 世界 的 负载 进行 测试 。 
(2) 压力 测试 一 一 将 负载 增加 到 强度 极限 ,以 此 来 确定 WebApp 环境 能 够 处 理 的 
容量 。 


12.8.1 负载 测试 


负载 测试 的 目的 是 确定 WebApp 和 其 服务 器 环境 如 何 响应 不 同 的 负载 条 件 。 当 进 
行 测试 时 ,下 列 变量 定义 了 一 组 测试 条 件 : 

N: 并 发 用 户 的 数量 ; 

T: 每 单位 时 间 的 在 线 事务 数量 ; 

D: 每 次 事务 服务 器 处 理 的 数据 负载 。 

在 系统 正常 的 操作 范围 内 定义 这 些 变量 。 当 每 种 测试 条 件 运行 时 ,收集 下 面 的 一 种 
或 多 种 测量 数据 : 平均 用 户 响应 时 间 , 下 载 标准 数据 单元 的 平均 时 间 ,或 者 处 理 一 个 事务 
的 平均 时 间 。Web 工程 团队 对 这 些 测量 进行 检查 ,以 确定 性 能 的 急剧 下 降 是 否 与 N、T 
和 DD 的 特殊 组 合 有 关 。 负 载 测 试 也 可 以 用 于 为 WebApp 用 户 估计 建议 的 连接 速度 。 以 
下 面 的 方式 计算 总 的 吞吐 量 P: 

P=NxTXxD 
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例如 ,考虑 一 个 大 众 体育 新 闻 站 点 。 在 某 一 给 定 的 时 刻 ,2 万 个 并 发 用 户 平均 每 两 分 
钟 提交 一 次 请 求 ( 事 务 T) 。 每 一 次 事务 需要 WebApp 下 载 一 篇 平均 长 度 为 3KB 的 新 文 
章 , 因 此 ,可 计算 吞吐 量 如 下 : 
P= (20 000X0.5X3KB)/(60s) = 500KB/s = 4Mb/s 
因此 ,Web 服务 器 的 网 络 连 接 将 必须 支持 这 种 数据 传输 速度 ,为 此 ,对 其 进行 测试 ， 
确保 它 能 够 达到 所 需要 的 数据 传输 速度 。 


12.8.2 压力 测试 


压力 测试 是 负载 测试 的 继续 ,但 是 ,在 压力 测试 中 ,我 们 强迫 变量 NT 和 满足 操 
作 极 限 ,然后 超过 操作 极限 。 这 些 测试 的 目的 是 回答 下 面 的 问题 : 
。 系统 “逐渐 ”降级 吗 ? 或 者 , 当 容量 超出 时 ,服务 器 宕 机 吗 ? 
。 服务 器 软件 会 给 出 “服务 器 不 可 用 ”的 提示 信息 吗 ? 更 一 般 地 说 ,用 户 知道 他 们 不 
能 访问 服务 器 吗 ? 
。 服务 器 队列 请 求 增加 资源 吗 ? 一 旦 容量 要 求 减少 ,会 释放 队列 所 占用 的 资源 吗 ? 
。 当 容 量 超过 时 ,事务 会 丢失 吗 ? 
。 当 容 量 超过 时 ,数据 完整 性 会 受到 影响 吗 ? 
。NN.T 和 DD 的 哪些 值 迫使 服务 器 环境 失效 ? 如 何 来 证 明 失效 了 ? 自动 通知 会 被 发 
送 到 位 于 服务 器 站 点 的 技术 支持 人 员 那 里 吗 ? 
。 如 果 系 统 失效 ,需要 多 长 时 间 才 能 回 到 在 线 状态 ? 
当 容 量 达到 80% 或 90% 时 , 某 些 WebApp 功能 (例如 ,计算 密集 的 功能 、 数 据 流动 
能 力 ) 会 被 停止 吗 ? 
有 时 将 压力 测试 的 变形 称 为 脉冲 / 回 弹 测试 。 在 这 种 测试 中 ,增加 负载 ,达到 最 大 容 
量 , 然 后 迅速 回落 到 正常 的 操作 条 件 , 然 后 再 增加 。 通 过 回 弹 系统 负载 ,测试 者 能 够 确定 
服务 器 如 何 调度 资源 来 满足 非常 高 的 需求 .然后 当 一 般 条 件 再 现时 释放 资源 (以 便 为 下 一 
次 脉冲 做 好 准备 ) 。 


12.9 ”WebApp 测试 工具 


已 经 有 了 许多 可 以 直接 适用 于 Web 工程 环境 中 的 各 类 自动 化 测试 工具 ,例如 : 

。 配置 和 内 容 管理 工具 : 对 WebApp 的 内 容 对 象 和 功能 构件 进行 版 本 管理 和 变更 
控制 。 

。 数据 库 性 能 工具 : 测量 数据 库 的 性 能 ,诸如 执行 所 选择 的 数据 库 查询 的 时 间 。 这 
些 工 具 帮 助 进行 数据 库 优 化 。 

。 调试 器 : 这 是 典型 的 程序 设计 工具 ,也 是 大 多 数 应 用 系统 开发 环境 的 一 部 分 。 可 

于 发 现 和 解决 代码 中 的 软件 缺陷 。 

。 缺陷 管理 系统 : 记录 缺陷 .追踪 它们 的 状态 及 解决 方案 。 有 些 缺 陷 管理 系统 还 包 
括 报告 工具 ,提供 缺陷 传播 及 缺陷 解决 率 方面 的 管理 信息 。 
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网 络 监测 工具 : 监视 网 络 阻塞 的 级 别 。 它 们 对 识别 网 络 瓶 颈 及 测试 前 端 系统 和 
后 端 系统 之 间 的 连接 很 有 用 。 

回归 测试 工具 : 存储 测试 用 例 和 测试 数据 ,并 且 在 连续 的 软件 变更 之 后 ,可 以 重 
复 使 用 这 些 测试 用 例 。 

站 点 监测 工具 : 通常 从 用 户 的 角度 监测 站 点 的 性 能 。 使 用 这 些 工 具 编 辑 统 计 表 ， 
诸如 端 到 端的 响应 时 间 和 吞吐 量 ,并 周期 性 地 检查 某 个 站 点 的 有 效 性 。 

压力 工具 : 在 高 水 平 的 运行 状态 下 ,帮助 开发 者 探测 系统 的 行为 ,并 发 现 系统 的 
极限 。 

系统 资源 监视 器 : 这 是 大 多 数 OS 服务 器 和 Web 服务 器 软件 的 一 部 分 ;它们 监视 
资源 ,如 磁盘 空间 .CPU 使 用 和 内 存 。 

测试 数据 产生 工具 : 辅助 用 户 产生 测试 数据 。 

测试 结果 比较 器 : 帮助 将 一 个 测试 集合 的 结果 与 另 一 个 测试 集合 的 结果 进行 比 
较 。 用 这 些 比较 器 来 检查 代码 的 改变 没有 对 系统 行为 造成 不 利 影响 。 

事务 监视 器 : 测量 大 量 事务 处 理 系统 的 性 能 。 

网 站 安全 性 工具 : 帮助 探测 潜在 的 安全 性 问题 。 你 可 能 经 常安 装 安全 性 探查 和 
监视 工具 , 按 你 的 计划 安排 运行 这 些 工 具 。 


10 习题 


请 参考 课文 内 容 以 及 其 他 资料 ,完成 下 列 选择 题 。 
(1) 以 下 关于 Web 应 用 软件 测试 的 说 法 中 ,正确 的 是 ( Xs 
A. 链接 测试 是 Web 应 用 软件 测试 的 一 项 内 容 
B. Web 应 用 软件 测试 通常 不 考虑 安全 性 测试 
C. 与 传统 软件 相 比 , Web 应 用 软件 测试 更 简单 
D. Web 应 用 软件 只 能 进行 黑 盒 测 试 ,不 能 进行 白 盒 测试 
(2) 以 下 关于 Web 应 用 软件 测试 的 说 法 中 ,错误 的 是 ( 入 
A. 内 容 测试 是 Web 应 用 软件 测试 的 一 项 重要 内 容 
B.Cookie 安全 性 测试 是 Web 应 用 软件 安全 性 测试 的 一 项 重要 内 容 
C. 并 发 测试 是 Web 应 用 软件 性 能 测试 的 一 项 重要 内 容 
D. 表单 测试 是 Web 应 用 软件 性 能 测试 的 一 项 重要 内 容 
(3) 关于 Web 应 用 软件 测试 的 说 法 中 ,错误 的 是 ( js 
A. Cookie 测试 是 Web 应 用 软件 功能 测试 的 一 项 重要 内 容 
B. 链接 测试 是 Web 应 用 软件 易 用 性 测试 的 一 项 重要 内 容 
C. Web 应 用 软件 测试 通常 需要 考虑 安全 性 测试 
D. Web 应 用 软件 测试 通常 需要 考虑 性 能 测试 
(4) 哪 一 项 属于 Web 应 用 软件 业务 层 测 试 关注 的 范畴 ? ( ) 
A. 浏览 器 兼容 性 测试 B. 应 用 服务 器 兼容 性 测试 
C. 服务 器 端 程序 的 功能 测试 D. 排版 结构 的 测试 
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(5) 关于 Web 应 用 软件 易 用 性 测试 的 说 法 中 ,错误 的 是 ( Ws 
A. Cookie 测试 是 Web 应 用 软件 易 用 性 测试 的 一 项 重要 内 容 
B. 排版 结构 测试 是 Web 应 用 软件 易 用 性 测试 的 一 项 重要 内 容 
C. 并 发 测试 不 是 Web 应 用 软件 易 用 性 测试 的 一 项 重要 内 容 
D. 浏览 器 兼容 性 测试 不 是 Web 应 用 软件 易 用 性 测试 的 一 项 重要 内 容 
(6) 以 下 关于 Web 应 用 软件 测试 的 说 法 中 ,正确 的 是 ( % 
A. 排版 结构 测试 是 数据 层 测试 关注 的 内 容 
B. 链接 测试 是 Web 应 用 软件 内 容 测 试 的 重要 内 容 
C. 在 对 Web 应 用 软件 进行 系统 测试 时 ,通常 需要 考虑 性 能 测试 
D. 测试 Web 应 用 软件 在 多 用 户 的 情况 下 是 否 会 出 现 系统 崩溃 ,属于 Web 应 用 
软件 可 靠 性 测试 考虑 的 范畴 
(7) 以 下 关于 Web 应 用 软件 测试 的 说 法 中 ,正确 的 是 ( i 
A. 应 用 服务 器 兼容 性 测试 是 Web 应 用 软件 业务 层 测试 的 一 项 内 容 
B. 浏览 器 兼容 性 测试 是 Web 应 用 软件 安全 性 测试 的 一 项 内 容 
C. Web 应 用 软件 压力 测试 的 主要 内 容 是 并 发 测试 
D. 表单 测试 是 Web 应 用 软件 易 用 性 测试 的 一 项 内 容 
(8) 以 下 关于 Web 应 用 软件 测试 的 说 法 中 ,正确 的 是 ( )。 
A. 内 容 测试 是 Web 应 用 软件 易 用 性 测试 的 一 项 重要 内 容 
B. Web 应 用 软件 虽然 需要 频繁 地 进行 演化 ,但 不 需要 频繁 地 进行 测试 
C，Cookie 安全 性 测试 是 Web 应 用 软件 安全 性 测试 的 一 项 重要 内 容 
D. Web 应 用 软件 只 能 进行 白 盒 测试 ,不 能 进行 黑 盒 测 试 
(9) 以 下 关于 Web 应 用 软件 测试 的 说 法 中 ,正确 的 是 ( 5 
A. Web 应 用 软件 安全 性 测试 只 关注 用 户 能 否 绕 开 访问 控制 使 用 超越 访问 权限 
的 内 容 
B. Web 应 用 软件 的 性 能 不 仅 与 Web 应 用 软件 自身 的 代码 有 关 , 还 可 能 与 所 用 
的 Web 服务 器 、 中 间 件 服务 器 以 及 数据 库 服 务 器 有 关 
C. 测试 Web 应 用 软件 是 否 支持 不 同 的 浏览 器 是 Web 应 用 软件 表示 层 测 试 关 
注 的 一 项 主要 内 容 
D. 对 于 没有 使 用 数据 库 的 Web 应 用 软件 ,不 需要 进行 性 能 测试 
(10) Web 应 用 系统 一 般 分 为 3 层 , 下 列 哪 层 不 属于 Web 应 用 系统 的 范畴 ? ( ) 
A. 应 用 层 B. 表示 层 C. 业务 层 D. 数据 层 
(11) 关于 Web 应 用 软件 系统 安全 ,说 法 正确 的 是 ( js 
A. 黑客 的 攻击 主要 是 利用 黑客 本 身 发 现 的 新 漏洞 
B. 以 任何 违反 安全 性 的 方式 使 用 系统 都 属于 入 侵 
C. 系统 的 安全 漏洞 属于 系统 的 缺陷 ,但 安全 漏洞 的 检测 不 属于 测试 的 范畴 
D. Web 应 用 软件 的 安全 性 仅仅 与 Web 应 用 软件 本 身 的 开发 有 关 
(12) 关于 Web 应 用 软件 的 特点 描述 ,错误 的 是 ( % 
A. 基于 无 连接 协议 B. 由 内 容 驱 动 


测试 Web 应 用 系统 


C. 开发 周期 较 长 ,演变 较 慢 D. 安全 性 要 求 较 高 
(13) 关于 Web 应 用 软件 功能 测试 ,以 下 说 法 正确 的 是 ( % 

A. 由 于 测试 的 不 可 穷 举 性 ,因此 链接 测试 不 需要 测试 所 有 的 链接 

B.Cookie 测试 不 在 Web 功能 测试 所 关注 的 范围 之 内 

C. Web 功能 测试 不 能 看 作 是 对 整个 Web 应 用 软件 进行 的 集成 测试 

D. 在 Web 应 用 中 ,许多 复杂 的 功能 是 通过 表单 完成 的 
(14) 在 Web 应 用 软件 的 分 层 测 试 策略 中 ,下 列 哪 个 不 是 测试 关注 的 层次 ? 〈 

A. 数据 层 B. 业务 层 C. 服务 层 D. 表示 层 
(15) 下 列 关 于 Web 应 用 软件 测试 的 说 法 中 ,正确 的 是 ( We 

A. Cookie 测试 是 Web 应 用 软件 功能 测试 的 重要 内 容 

B. 对 于 没有 使 用 数据 库 的 Web 应 用 软件 不 需要 进行 性 能 测试 

C. 链接 测试 是 Web 应 用 软件 易 用 性 测试 的 重要 内 容 

D. Web 应 用 软件 安全 性 测试 仅 关 注 Web 应 用 软件 是 否 能 够 防御 网 络 攻击 
(16) 以 下 关于 Web 应 用 软件 测试 的 说 法 中 错误 的 是 ( ) 

A. 数据 完整 性 测试 是 Web 应 用 软件 数据 层 测 试 的 一 项 重要 内 容 

B. 内 容 测 试 是 Web 应 用 软件 易 用 性 测试 的 一 项 重要 内 容 

C. 表单 测试 是 Web 应 用 软件 功能 测试 的 一 项 重要 内 容 

D. 客户 端 内 容 安全 性 的 测试 是 Web 应 用 软件 安全 性 测试 的 一 项 重要 内 容 
(17) 以 下 哪 一 项 不 属于 Web 应 用 软件 表示 层 测 试 关注 的 范畴 ? ( ) 

A. 排版 结构 的 测试 B. 链接 结构 的 测试 

C. 浏览 器 兼容 性 的 测试 D. 应 用 服务 器 兼容 性 测试 
(18) 以 下 关于 Web 应 用 软件 测试 的 说 法 中 ,正确 的 是 ( ) 

A. 对 Web 应 用 软件 进行 性 能 测试 时 ,不 需要 进行 压力 测试 

B. 内 容 测 试 是 Web 应 用 软件 易 用 性 测试 的 一 项 重要 内 容 

CCookie 测试 是 Web 应 用 软件 功能 测试 的 一 项 重要 内 容 

D. 是 否 存 在 无 效 链接 是 Web 应 用 软件 安全 性 测试 关注 的 范畴 
(19) 以 下 哪 一 项 属于 数据 兼容 性 测试 关注 的 范畴 ? ( ) 

A. 软件 在 异常 退出 时 是 否 会 破坏 正在 处 理 的 文件 

B. 软件 是 否 可 以 在 不 同 的 J2EE 应 用 服务 器 上 运行 

C. 软件 同类 功能 的 使 用 风格 是 否 一 致 

D. 软件 是 否 能 打开 以 前 版 本 保存 的 文件 
(20) 以 下 哪 一 项 不 属于 数据 兼容 性 测试 关注 的 范畴 ? ( 

A. 一 个 Web 应 用 软件 是 否 支持 不 同 的 关系 型 数据 库 

B. 一 个 浏览 器 是 否 同时 支持 不 同 版 本 的 HTML 文件 格式 

C. 一 个 排版 软件 是 否 可 以 打开 该 软件 以 前 版 本 保存 的 文件 

D. 一 个 文字 处 理 软 件 是 否 可 以 打开 其 他 文字 处 理 软 件 保存 的 文件 
(21) 哪 一 项 不 属于 数据 兼容 性 测试 关注 的 范畴 ? ( ) 

A. 一 个 Web 应 用 软件 是 否 能 支持 以 前 版 本 使 用 的 关系 型 数据 库 


) 
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B. 一 个 杀毒 软件 是 否 会 破坏 其 他 软件 保存 的 文件 
C. 一 个 文字 处 理 软件 能 否 处 理 其 他 文字 处 理 软件 保存 的 文件 
D. 一 个 文字 处 理 软件 能 和 否 处 理 以 前 版 本 保存 的 文件 
(22) 针对 软件 对 其 运行 环境 的 依赖 进行 测试 ,以 验证 软件 是 否 能 在 所 有 期 望 的 环境 
中 运行 ,这 种 测试 方法 是 ( 入 
A. 极限 测试 B. 易 用 性 测试 。” C. 功能 测试 D. 兼容 性 测试 


12.11 实验 与 思考 
12.11.1 实验 目的 


本 节 “ 实 验 与 思考 ”的 目的 : 

(1) 熟悉 Web 应 用 系统 测试 的 相关 概念 与 技术 。 

(2) 确定 一 个 待 测试 的 网 站 。 基 于 网 站 上 的 应 用 ,描述 一 个 访问 者 在 网 站 中 可 能 执 
行 的 一 系列 典型 活动 。 尽 可 能 地 包括 数据 输入 页 面 , 写 出 在 测试 过 程 中 需要 注意 或 着 重 
关注 的 场景 。 

(3) 深入 分 析 一 个 在 线 药 房 。 列 举 针 对 此 WebApp 的 任何 特殊 的 可 用 性 测试 。 讨 论 
一 个 药品 互 作用 检查 功能 所 必须 进行 的 构件 级 测试 的 类 型 。 分 析 此 服务 器 需要 具有 的 吞 
吐 量 。 


12.11.2 工具 /准备 工作 


在 开始 本 实验 之 前 ,请 认真 阅读 课程 的 相关 内 容 。 
需要 准备 一 台 带 有 浏览 器 能够 访问 因特网 的 计算 机 。 


12.11.3 实验 内 容 与 步骤 
1) 概念 理解 。 


请 查阅 有 关 资 料 ,根据 你 的 理解 和 看 法 ,给 出 下 列 概念 的 定义 : 
(1) 内 容 测 试 : 


(2) 界面 测试 : 


(3) 构件 测试 : 


(4) 导航 测试 : 


2) 确定 一 个 待 测试 的 网 站 。 基 于 网 站 上 的 应 用 ,描述 一 个 访问 者 在 网 站 中 可 能 执行 
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的 一 系列 典型 活动 。 尽 可 能 地 包括 数据 输入 页 面 , 写 出 在 测试 过 程 中 需要 注意 或 着 重 关 
注 的 场景 。 

(1) 你 确定 的 待 测试 网 站 的 名 称 是 : 

网 址 : 

(2) 该 网 站 的 主要 应 用 : 


(3) 一 个 访问 者 在 网 站 中 可 能 执行 的 一 系列 典型 活动 


(4) 在 测试 过 程 中 需要 注意 或 着 重 关 注 的 场景 ; 


3) 假设 你 正在 开发 满足 老年 人 需要 的 在 线 药房 (YourCornerPharmacy. com) 。 药 房 
提供 了 典型 的 功能 ,但 也 为 每 位 客户 维护 一 个 数据 库 , 使 得 它 可 以 提供 药品 信息 和 潜在 的 
药品 互 作用 ( 即 配伍 禁忌 ) 警 告 。 

(1) 请 分 析 针 对 此 WebApp 的 任何 特殊 的 可 用 性 测试 。 


(2) 假设 你 已 经 为 在 线 药 房 YourCornerPharmacy. com 实现 了 一 个 药品 互 作用 检查 
功能 。 讨 论 必须 进行 的 构件 级 测试 的 类 型 ,以 确保 这 项 功能 工作 正常 。( 注 意 : 实现 这 项 
功能 将 必须 使 用 数据 库 。) 


(3) 为 使 其 成 功 ,在 线 药房 YourCornerPharmacy. com 已 经 实现 了 一 个 特殊 的 服务 ， 
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单独 处 理 处 方 的 重新 填写 。 平 均 情 况 下 ,1000 个 并 发 用 户 每 两 分 钟 提交 一 次 重 填 请求 ， 
WebApp 下 载 500B 的 数据 块 来 响应 。 此 服务 器 需要 具有 的 吞吐 量 是 多 少 Mb/s? 


12.11.4 实验 总 结 


12.11.5 实验 评价 (教师 ) 


12.12 阅读 与 分 析 : 12306 网 站 为 何 陷 和 人 混乱 ? 
实际 是 权利 与 利益 博弈 
对 这 个 国家 来 说 ,每 年 的 春运 (图 12-4) 都 是 一 场 怨声载道 的 抢 票 大 战 。2012 年 春 


运 ,全 路 启用 的 铁路 网 路 售票 系统 12306. cn 上 线 不 久 即 告 失败 一 一 网 站 时 常 瘫 疾 , 用 户 
无 法 登录 ,即使 登录 后 订单 也 无 法 提交 ,其 至 有 人 支付 成 功 却 没 能 买 到 票 ,诸多 问题 集中 


图 12-4 春运 


一 张 小 小 的 火车 票 ,无 疑 是 过 年 前 后 这 两 个 月 全 球 最 为 紧俏 的 商品 。 与 之 对 应 的 是 ， 
铁路 网 络 售票 系统 的 平台 www. 12306. cn 诞生 才 一 年 就 成 了 14 亿 人 关注 的 焦点 。 根 据 
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互联 网 排名 网 站 Alexa 的 排名 ,2012 年 1 月 12 日 ,12306.cn 单 日 访问 量 已 飙升 至 全 球 90 


位 ,逼近 了 第 83 位 的 京东 商城 , 见 图 12-5 和 图 12-6 。 


图 12-5 全 国 铁路 客票 系统 监控 和 技术 支持 维护 中 心 


夺标 预 林 。。 过于 查询 。。 列车 时 刘表 查询 。。 正史 点 查 词 。。” 才 天 代入 点 。 改 路 术 程 要 刘 


坊 > 用 户 登录 
E> [ap27 有 ] 
密码 ] 
时 ER， | G8P! ees 
3 
使 用 须知 网 上 购 票 常见 问题 


6 网 交 票友 由 在 名 FI 为 1 


了 12306.cnp9 是 全 天 联 和 09? 4 人 启运 连理 弛 I) 
Ns>> 


订 权 FW 2008-2015 析 尖 半生 技术 中 心 中 国 析 才 和 学 夺 究 对 
icp 10009636® 


图 12-6 12306 网 站 主页 


“如 果 12306 平台 上 市 的 话 , 估 值 在 100 亿 元 以 上 。” 铁 道 部 一 位 不 愿 透露 姓名 的 高 层 


对 记者 说 道 。 


但 正 是 这 个 创造 奇迹 的 购 票 网 站 ,正在 经 历 一 场 浇 涡 式 的 与 论 风 波 。 据 记者 了 解 , 在 
火车 票 购 票 网 的 系统 平台 开发 上 ,IBM、 清 华 大 学 、 易 程 科技 和 铁 科 院 电子 所 都 曾 激烈 后 
杀 过 ,尤其 是 易 程 科技 和 铁 科 院 电子 所 ,胶着 对 峙 了 五 年 之 久 , 最 终 由 铁 科 院 电子 所 获得 。 

这 一 过 程 曾 被 媒体 揭示 称 ,12306 网 站 平台 招标 时 铁道 部 弃 用 清华 .IBM 和 易 程 科技 
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的 成 熟 技术 ,利益 输送 给 其 下 属 企业 铁 科 院 电子 所 。 

然而 ,记者 多 方 探访 获悉 ,其 间 过 程 ,并 不 如 外 界 所 称 的 “铁道 部 肥水 不 流 外 人 田 ”, 而 
是 另 有 复杂 且 忌 讳 莫 深 的 权力 博弈 。 

“表面 上 是 方案 与 公司 之 争 , 实 际 上 是 权力 与 利益 之 争 ,但 究 根 到 底 还 是 铁路 管理 体 
制 的 问题 ”铁道 部 一 位 了 解 信 息 技术 的 高 层 接受 本 报 记 者 采访 时 称 , 易 程 科技 根本 就 没 
有 什么 高 端 技术 ,只 是 傍 着 高 层 力量 强势 入 场 。 铁 道 部 最 终 弃 用 IBM 方案 则 是 出 于 铁路 
系统 的 长 远 安全 考虑 ,最 终 采 用 的 是 铁 科 院 自主 研发 的 后 端 系统 。 


准备 不 足 问 题 重重 


回 望 12306 网 站 在 2011 年 12 月 底 以 来 的 表现 ,铁道 部 高 层 也 直 呼 想不到 。 

铁道 部 副 部 长 胡 亚 东 介绍 ,今年 第 一 次 在 全 国 铁路 实行 网 络 电话 订 票 ,截至 1 月 8 日 
已 经 达到 每 天 200 万 张 ,12306 网 站 的 注册 用 户 已 超过 1000 万 人 。1 月 1 日 至 7 日 ， 
12306 网 站 日 均 点 击 次 数 已 经 超过 了 10 亿 次 ,专家 认为 瞬间 点 击 可 能 达到 了 “世界 第 

高 度 的 关注 、 巨 大 的 访问 量 ,导致 12306 网 站 频繁 出 现 系统 崩溃 、 无 法 登录 、 无 法 支付 
等 情况 。 

“ 像 春 运 这 样 庞大 的 需求 量 ,难道 铁道 部 没有 预想 到 并 有 了 所 准备 ?” 隆 梅 资本 管理 有 限 
公司 副 总 经 理 马 宏 兴 对 此 困惑 不 解 。 

在 探究 12306 网 站 问题 的 深层 原因 以 及 解决 之 道 时 ,各 家 看 法 不 同 ,“12306 网 站 的 
问题 最 终 还 是 系统 架构 的 问题 。 因 为 用 户 有 大 量 的 动态 、 交 互 式 访问 ,所 有 的 请 求 都 会 发 
送 到 12306 网 站 的 服务 器 端 ,同时 在 线 并 发 用 户 数量 太 多 ,导致 网 站 无 力 承载 ,造成 拥 
堵 。" 华 南 师 范 大 学 计算 机 学 院 副 院 长 单 志 龙 认为 。 

又 有 说 法 认为 ,如 果 给 12306 网 站 增加 服务 器 和 带宽 ,也 能 够 缓解 拥堵 的 症状 。 这 一 
观点 铁道 部 内 部 颇 为 认同 。 

“得 承认 ,我 们 对 访问 量 估计 得 不 足 。.” 铁 道 部 信息 技术 中 心 一 位 中 层 向 记者 透露 ， 
12306 网 站 曾 在 2011 年 春运 期 间 试 运行 ,高 峰 时 段 访问 量 约 在 1 亿 , 因 此 ,信息 中 心 估 计 
2012 年 春运 期 间 的 访问 量 约 在 3 亿 至 4 亿 。 

但 是 ,结果 却 大 大 出 乎 人 们 的 预料 。12306 网 站 在 1 月 9 日 的 日 点 击 量 达 到 14 亿 
次 ,是 原来 料想 峰值 的 5 倍 之 多 。“ 崩 溃 ” 在 所 难免 ! 

另外 一 个 原因 是 “上 马 得 太 过 仓促 "。 铁 道 部 一 位 不 愿 透露 姓名 的 高 层 向 记者 透露 ， 
事实 上 网 络 售票 系统 的 上 线 在 前 部 长 刘志军 时 代 因 种 种 背后 利益 纠纷 , 迟 褒 多 年 未 能 成 
行 ,直到 现任 部 长 盛 光 祖上 台 之 后 ,号 令 加 速 上 马 必 以 至 于 应 对 不 了 如 今 庞 大 的 需求 量 ”。 

据 记 者 了 解 ,*12306? 从 方案 设计 招标 、 设 备 采 购 到 正式 投放 运行 时 间 不 到 一 年 。 

2010 年 7 月 15 日 和 11 月 8 日 ,中 国 铁路 建设 投资 公司 受 铁道 部 信息 技术 中 心 委 
托 , 对 铁路 客户 服务 中 心 信息 系统 一 期 工程 和 CDN 服务 进行 招标 。 

此 后 卷 入 “ 宕 机 ” 洲 涡 的 太极 股份 和 网 宿 科 技 正 是 在 这 两 次 招标 中 中 标的 。 按 照 太极 
股份 2010 年 年 度 财报 中 披露 的 信息 ,太极 股份 与 铁道 部 信息 技术 中 心 的 合同 额 达 4895 
万 元 , 占 其 当年 全 部 营业 收入 的 2. 49%。 网 宿 科技 则 并 无 披露 相应 的 合作 金额 。 
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盛 光 祖上 任 后 ,铁道 部 信息 技术 中 心 又 对 铁路 客户 服务 中 心 信息 系统 二 期 工程 进行 
招标 。 

两 次 招标 的 总 金额 铁道 部 不 曾 披露 过 ,“ 窒 口 统计 , 投 在 12306 网 站 的 资金 约 在 1 亿 
多 .” 铁 道 部 高 层 向 记者 解释 道 , 所 谓 窗口 统计 ,是 指 新 增资 金 部 分 ,网 络 售票 系统 实际 上 
也 运用 到 了 铁道 部 历年 在 客票 发 售 与 预订 系统 的 资源 ,如 加 上 那 部 分 投资 , 则 极 难 计算 。 

2011 年 6 月 ,12306 网 站 正式 上 线 运行 。 铁 道 部 分 3 步 逐步 将 G 打头 的 高 铁 列车 车 
次 ,D 打头 的 动车 车 次 ,以 及 Z、T、K 打头 的 直达 、 特 快 与 快车 等 车 次 分 批 次 地 上 网 售票 。 
完全 实现 所 有 车 次 都 可 网 购 的 ,事实 上 直到 春节 前 乡 才 实现 。 


五 年 利益 之 争 


事实 上 ,从 2006 年 实现 铁路 客票 发 售 和 预订 系统 全 路 联网 之 后 ,铁道 部 就 已 经 将 网 
络 售票 平台 的 搭建 提 上 议程 。 但 在 此 后 长 达 五 年 时 间 里 ,此 工作 并 无 实质 性 进展 。 

铁道 部 高 层 向 记者 透露 ,因为 铁道 部 高 层 利 益 的 巨大 分 歧 , 解 决 方案 实际 上 海 没 在 口 
水 与 利益 之 争 中 ,直到 2010 年 才 有 了 突破 与 进展 。 

此 前 ,清华 大 学 Web 与 软件 技术 研究 中 心 电 子 商务 研究 宝 主 任 、 高 级 架构 师 王 津 在 
接受 本 报 采访 时 曾 介绍 ,IBM 和 清华 大 学 都 曾 参与 12306 网 站 系统 建设 咨询 的 过 程 , 当 
时 向 铁道 部 提出 了 网 上 售票 系统 的 两 个 解决 方案 ,一 是 IBM 拥有 专利 的 “基于 Z/TPF 的 
互联 网 订 票 引擎 ”, 另 一 个 是 由 该 中 心 掌握 自主 知识 产权 的 分 布 式 解决 方案 。 但 最 后 这 两 
个 方案 均 未 被 铁道 部 采纳 。 

IBM 的 方案 未 被 采用 与 成 本 过 高 有 关 。“ 另 一 个 原因 是 出 于 长 远 安全 考虑 ”, 铁 道 部 
的 高 层 表示 ,庞大 的 铁路 网 络 系统 采用 美国 公司 的 解决 方案 ,难以 确保 其 特殊 时 期 的 安全 
问题 。 至 于 清华 拥有 自主 知识 产权 的 方案 为 何 也 没有 被 采纳 ,该 高 层 不 置 可 否 。 

最 终 在 解决 方案 设计 招标 时 ,申报 方案 的 除了 铁 科 院 电子 所 ,还 有 易 程 科技 股份 有 限 
公司 。 

“这 个 招标 实际 上 是 12306 网 站 后 端 系统 设 计 招 标 .” 铁 道 部 高 层 向 记者 透露 ,由 于 
IBM 和 清华 大 学 早 就 被 排除 出 了 候选 名 单 ,最 终 的 角逐 落 在 铁 科 院 和 易 程 科技 身上 。 

铁 科 院 下 属 的 电子 所 成 立 于 1979 年 ,从 事 铁路 电子 计算 技术 的 专业 研究 ,1992 年 电 
子 所 单独 注册 成 立 北京 经 纬 信息 技术 公司 ,开始 企业 化 运作 。 

由 于 铁 科 院 电子 所 此 前 曾 研 制 过 5 个 版 本 的 铁路 票务 系统 ,铁路 客票 研制 经 验 充足 。 

易 程 科技 成 立 于 2006 年 3 月 份 ,该 公司 网 站 自称 是 清华 大 学 整合 所 属 企业 优势 资源 
组 建成 立 的 股份 制 公司 ,在 铁路 、 航 空 、 枢 纽 . 城 际 及 城市 轨道 交通 等 领域 提供 业务 咨询 、 
系统 集成 .技术 产品 和 运营 服务 。 

在 工商 登记 资料 中 , 易 程 科技 最 初 经 营 范围 只 是 技术 进出 口 货物 进出 口 和 代理 进出 
口 。 如 今 易 程 早 就 扩大 了 其 经 营 范围 ,并 拥有 了 一 系列 的 产品 和 解决 方案 。 

记者 调 阅 易 程 科技 的 工商 资料 获悉 , 易 程 科技 股份 有 限 公司 是 由 清华 同方 威 视 技术 
股份 有 限 公 司 、 北 京 神州 亿 品 投资 有 限 公 司 、 深 圳 华科 投资 有 限 公司 、 同 方 投资 有 限 公 司 
与 清华 同方 微 电 子 有 限 公司 五 家 企业 共同 出 资 6000 万 组 建 的 。 五 家 公司 所 持 易 程 股份 
比例 分 别 为 30%、30%、20%、15% 和 5%。 
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2007 年 ,股东 中 有 三 家 更 名 ,清华 同方 威 视 、 北 京 清华 同方 微 电 子 分 别 更 名 为 同方 威 
视 和 北京 同方 微 电 子 ,神州 亿 品 投资 则 更 名 为 易 达 通 投 资 。 资 料 还 显示 , 易 程 科技 实际 上 
是 清华 同方 控股 。 


多 网 运营 悬念 


记者 无 法 获悉 易 程 科技 当初 在 方案 投标 时 所 提交 的 解决 方案 ,按照 其 网 站 公布 的 内 
容 , 易 程 科技 所 拥有 的 票务 系统 软件 似乎 可 以 解决 12306 网 站 目前 的 所 有 问题 。 

易 程 科技 称 , 其 票务 软件 设计 规模 达到 年 旅客 发 送 量 50 亿 人 次 ,为 全 球 最 大 规模 ,而 
且 还 可 支持 高 峰 时 段 每 分 钟 30 000 一 50 000 个 并 发 交易 服务 。 此 外 还 支持 多 端口 外 接 。 
因此 被 外 界 视 为 "成熟 方案 ”。 

但 铁道 部 高 层 对 这 个 说 法 并 不 认同 : 业内 同行 很 清楚 易 程 科技 的 技术 水 平 ,以 易 程 
所 做 的 京 津 城 际 票务 系统 集成 项 目 为 例 , 易 程 的 系统 里 问题 多 多 ,有 将 上 行车 次 标注 成 下 
行车 ,下 行车 反倒 成 了 上 行车 的 低级 错误 。 当 初 铁道 部 信息 技术 中 心 不 得 不 调拨 了 40 个 
技术 人 员 前 去 抢救 该 系统 。 

铁道 部 高 层 在 接受 记者 采访 时 指出 ,目前 12306 的 硬件 和 软件 确实 存在 问题 ,但 最 核 
心 的 原因 出 于 两 点 ,其 一 是 铁路 网 络 的 物理 隔绝 ,以 及 12306 网 站 的 信息 存在 内 网 与 外 网 
转换 涪 后 的 问题 。 

铁道 部 高 层 告诉 记者 ,12306 网 站 属于 外 网 ,其 数据 并 不 是 直接 连接 自 铁路 客票 发 售 
和 预订 系统 ,而 是 存在 内 网 与 外 网 的 数据 转换 。 "数据 交换 的 时 间 不 知道 是 多 长 , 听 说 在 
10 分 韩 去 右 。” 

“在 互联 网 上 ,只 要 能 提升 百 分 之 几 的 效率 ,那么 网 络 与 服务 器 的 压力 就 能 降低 很 
多 。?" 一 位 互联 网 知名 技术 工程 师 建议 ,12306 网 站 只 要 在 关键 部 分 进行 改进 ,那么 就 能 大 
大 地 提高 效率 。 比 如 ,12306 网 站 “ 余 票 查询 是 每 10 分 钟 更 新 一 次 ”。 这 10 分 钟 就 是 可 
以 进行 静态 处 理 的 ,只 要 网 站 做 好 这 10 分 钟 ,那么 网 络 拥堵 的 情况 就 能 够 大 大 降低 。 

另 据 了 解 ,针对 全 国 “ 一 张 网 ”网 上 预订 火车 票 出 现 的 网 络 竣 痰 状况 ,铁道 部 日 前 表示 
将 会 研究 实施 “ 开 分 店 ” 式 的 多 网 运作 。 

“采取 分 店 式 运营 ,可 以 将 集中 处 理 转 化 成 分 散 处 理 .” 近 邻 帮 公 司 的 CEO 田 悦 称 ,在 
实际 操作 中 ,可 以 根据 区 域 访问 量 的 大 小 ,以 及 各 个 区 域 的 访问 特点 ,部 署 相应 的 资源 。 
比如 ,有 一 些 地 区 访问 量 很 集中 ,而 另 一 些 地 区 访问 量 不 大 ,那么 配置 的 资源 就 可 以 相应 
增加 或 减少 。 

资料 来 源 : 21 世纪 经 济 报道 ,2012-01-14。 
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测试 用 例 是 为 了 实现 测试 有 效 性 而 采取 的 一 种 最 基本 的 手段 。 好 的 测试 用 例 可 以 帮 
助 测试 人 员 更 快 地 发 现 缺 陷 , 会 在 测试 过 程 中 不 断 被 重复 使 用 。 同 时 ,在 测试 过 程 中 可 以 
通过 对 测试 用 例 的 组 织 和 跟踪 来 完成 对 测试 工作 的 量化 和 管理 。 


13.1 测试 用 例 构成 及 其 设计 


测试 用 例 是 有 效 地 发 现 软件 缺陷 的 最 小 测试 执行 单元 ,是 为 了 特定 目的 (如 考察 特定 
程序 路 径 或 验证 是 否 符合 特定 的 需求 ) 而 设计 的 测试 数据 及 与 之 相关 的 测试 规程 的 一 个 
特定 的 集合 。 测 试用 例 在 测试 中 具有 重要 的 作用 ,测试 用 例 有 特定 的 书写 标准 ,在 设计 测 
试用 例 时 需要 考虑 一 系列 的 因素 ,并 遵循 一 些 基 本 的 原则 。 

设计 测试 用 例 的 方法 很 多 ,例如 前 面 讨论 的 黑 盒 测 试 和 白 盒 测试 方法 。 黑 盒 测 试 方 
法 包括 等 价 类 划分 法 .边界 值 分 析 方法 、 因 果 图 ,决策 表 、 功 能 图 法 、. 正 交 试 验 法 等 ,而 白 盒 
测试 方法 包括 语句 覆盖 条 件 覆 盖 、 分 支 覆 盖 、 条 件 -分 支 组 合 方法 .基本 路 径 驯 盖 等 。 测 
试用 例 设 计 方法 还 可 以 采用 数据 流 分 析 ,控制 流 分 析 . 业 务 逻 辑 时 序 分 析 、 基 于 程序 错误 
的 变异 、 基 于 代数 运算 符号 和 形式 逻辑 等 方法 来 完成 。 


13.1.1 测试 用 例 的 重要 性 


在 测试 过 程 中 需要 通过 执行 测试 用 例 来 发 现 缺 陷 , 它 具有 以 下 几 个 方面 的 作用 : 

(1) 有 效 性 。 测 试用 例 是 测试 人 员 测试 过 程 中 的 重要 依据 。 我 们 已 经 知道 , 穷 举 测 
试 是 不 可 能 的 ,因此 ,设计 良好 的 测试 用 例 将 大 大 节约 时 间 ,提高 测试 效率 。 

(2) 可 复 用 性 。 良 好 的 测试 用 例 具有 重复 使 用 的 功能 ,使 得 测试 过 程 事半功倍 。 不 
同 的 测试 人 员 根 据 相同 的 测试 用 例 所 得 到 的 输出 结果 是 一 致 的 ,对 于 准确 的 测试 用 例 的 
计划 、 执 行 和 跟踪 是 测试 的 可 复 用 性 的 保证 。 

(3) 易 组 织 性 。 即 使 是 很 小 的 项 目 , 也 可 能 会 有 成 百 上 千 甚 至 更 多 的 测试 用 例 ,测试 
用 例 可 能 在 数 月 甚至 几 年 的 测试 过 程 中 被 创建 和 使 用 ,正确 的 测试 计划 将 会 很 好 地 组 织 
这 些 测试 用 例 并 提供 给 测试 人 员 或 者 其 他 项 目 作为 参考 和 借鉴 。 

(4) 可 评估 性 。 从 测试 的 项 目 管理 角度 来 说 ,测试 用 例 的 通过 率 是 检验 代码 质量 的 
保证 。 测 试 人 员 经 常 说 代码 的 质量 不 高 或 者 代码 的 质量 很 好 ,量化 的 标准 应 该 是 测试 用 
例 的 通过 率 以 及 软件 缺陷 (Bug) 的 数目 。 

(5) 可 管理 性 。 从 测试 的 人 员 管 理 的 角度 来 说 ,测试 用 例 也 可 以 作为 检验 测试 进度 
的 工具 之 一 ,工作 量 以 及 跟踪 /管理 测试 人 员 的 工作 效率 的 因素 ,适用 于 对 新 的 测试 人 员 
的 检验 ,从 而 更 加 合理 地 做 出 测试 安排 和 计划 。 
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因此 ,测试 用 例 使 得 测试 的 成 本 降低 ,并 具有 可 重复 使 用 功能 ,也 是 检测 测试 效果 的 
重要 因素 。 设 计 良 好 的 测试 用 例 是 测试 的 关键 工作 之 一 。 

编写 测试 用 例 需要 设计 者 对 产品 的 设计 、 功 能 规格 说 明 书 、 用 户 场 景 以 及 程序 / 模 
块 的 结构 都 有 比较 透彻 的 了 解 。 刚 开始 时 ,测试 人 员 只 能 执行 别人 写 好 的 测试 用 例 ， 
随 着 测试 人 员 的 经 验 积累 和 技术 的 提高 ,掌握 测试 用 例 的 设计 方法 和 所 需 的 知识 ,这 
时 测试 人 员 就 能 够 独立 编写 测试 用 例 。 当 然 , 请 资深 人 人员 帮助 审查 ,有 助 于 控制 测试 
用 例 的 质量 。 


13.1.2 测试 用 例 设 计 书写 标准 


在 测试 用 例 的 编写 过 程 中 ,需要 遵守 基本 的 测试 用 例 编写 标准 ,并 参考 一 些 测试 用 例 
设计 的 指南 。 在 ANSI/ITEEE 829-1983 标准 中 , 列 出 了 和 测试 设计 相关 的 测试 用 例 编写 
规范 和 模板 。 标 准 模板 中 主要 元 素 如 下 : 
标识 符 (Identification) : 每 个 测试 用 例 应 该 有 一 个 唯一 的 标识 符 , 它 将 成 为 所 有 
和 测试 用 例 相 关 的 文档 /表格 引用 和 参考 的 基本 元 素 , 这 些 文档 /表格 包括 缺陷 报 
告 ,测试 任务 、 测 试 报告 等 。 
测试 项 (Test Items): 测试 用 例 应 该 准确 地 描述 所 需要 测试 的 项 及 其 特征 ,测试 
项 应 该 比 测试 设计 说 明 中 所 列 出 的 特性 描述 更 加 具体 ,例如 , Windows 计算 器 应 
用 程序 测试 中 ,测试 对 象 是 整个 应 用 程序 的 用 户 界面 ,其 测试 项 将 包括 该 应 用 程 
序 的 各 个 界面 元 素 的 操作 ,例如 窗口 缩放 、 界 面 布局 ,菜单 等 。 
测试 环境 要 求 : 用 来 表征 执行 该 测试 用 例 需 要 的 测试 环境 ,一 般 来 说 ,在 整个 测 
试 模块 里 面 应 该 包含 整个 的 测试 环境 的 特殊 需求 ,而 单个 测试 用 例 的 测试 环境 需 
要 表征 该 测试 用 例 单独 所 需要 的 特殊 环境 需求 。 
输入 标准 : 用 来 执行 测试 用 例 的 输入 需求 。 这 些 输 入 可 能 包括 数据 文件 或 者 操 
作 ( 例 如 鼠标 的 单 击 、 击 键 等 )。 
输出 标准 : 标识 按照 指定 的 环境 、 条 件 和 输入 而 得 到 的 期 望 输出 结果 。 如 果 可 能 
的 话 , 尽 量 提供 适当 的 系统 规格 说 明 来 证 明 期 望 的 结果 。 
测试 用 例 间 的 关联 : 用 来 标识 该 测试 用 例 与 其 他 测试 用 例 之 间 的 依赖 关系 。 在 
测试 的 实际 过 程 中 ,很 多 测试 用 例 并 不 是 单独 存在 的 ,它们 之 间 可 能 有 某 种 依赖 
关系 ,例如 用 例 A 需要 在 B 的 测试 结果 正确 的 前 提 上 才 被 执行 ,此 时 测试 人 员 需 
要 在 A 的 测试 用 例 中 表明 对 B 的 依赖 性 ,从 而 保证 测试 用 例 的 严谨 性 。 

综 上 所 述 ,可 以 使 用 一 个 数据 库 的 表 来 描述 测试 用 例 的 主要 元 素 ,如 表 13-1 所 示 。 

如 果 用 数据 词典 的 方法 来 表示 ,测试 用 例 可 以 简单 地 表示 成 : 测试 用 例 二 {输入 数据 
十 操作 步骤 十 期 望 结果 } ,其 中 { } 表 示 重 复 。 这 个 式 子 还 表明 ,每 一 个 完整 的 测试 用 例 不 
仅 包 含有 被 测 程序 的 输入 数据 ,而 且 还 包括 执行 的 步骤 、 预 期 的 输出 结果 。 

我 们 用 一 个 具体 例子 来 描述 测试 用 例 的 组 成 结构 。 例 如 对 Windows 记事 本 程序 进 
行 测试 ,选取 其 中 的 一 个 测试 项 一 一 文件 (File) 菜 单 栏 的 测试 。 
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表 13-1 测试 用 例 元 素 表示 


字段 名 称 类 型 | 是 否 必 选 注释 
标识 符 整 型 是 唯一 标识 该 测试 用 例 的 值 
测试 项 字符 型 是 测试 的 对 象 
测试 环境 要 求 字符 型 否 可 能 在 整个 模块 里 面 使 用 相同 的 测试 环境 需求 
输入 标准 字符 型 是 
输出 标准 字符 型 是 
测试 用 例 间 的 关联 字符 型 否 并 非 所 有 的 测试 用 例 之 间 都 需要 关联 


测试 对 象 : 记事 本 程序 文件 菜单 栏 (测试 用 例 标识 1000) ,所 包含 的 子 测 试用 例 描述 


如 下 : 


| 文件 新 建 (1001) 
bt 文件 /打开 (1002) 
1-------- 文件 /保存 4003) 
| 文件 /另存 (1004) 
| 文件 /页 面 设置 (1005) 
= 大 文件 /打印 (1006) 
| 文件 /退出 (1007) 

有 = 菜单 布局 (1008) 

用 三 = 全 快捷 键 (1009) 


选取 其 中 的 一 个 子 测试 用 例文 件 /退出 (1007) ”作为 详细 例子 一 一 完整 的 测试 用 例 
描述 ,如 表 13-2 所 示 。 通 过 这 个 例子 ,可 以 了 解 测 试用 例 具体 的 描述 方法 和 格式 。 通 过 
实践 ,获得 必要 的 技巧 和 经 验 ,能 更 好 地 描述 出 完整 的 .良好 的 测试 用 例 。 


表 13-2 一 个 具体 的 测试 用 例 


字段 名 称 描 述 
标识 符 1007 
测试 项 记事 本 程序 ,文件 菜单 栏 一 文件 /退出 菜单 的 功能 测试 
测试 环境 要 求 Windows 2000 Professional, 中文 版 
1. 打开 Windows 记事 本 程序 ,不 输入 任何 字符 ,鼠标 单 击 选择 菜单 “文件 ”一 
“退出 ” 
2. 打开 Windows 记事 本 程序 ,输入 一 些 字符 ,不 保存 文件 ,鼠标 单 击 选择 菜 
单 “ 文 件 ”~“ 退 出 ” 
3. 打开 Windows 记事 本 程序 ,输入 一 些 字符 ,保存 文件 ,鼠标 单 击 选择 菜单 
人 “文件 ”一 “退出 ” 
4. 打开 一 个 Windows 记事 本 文件 (扩展 名 为 . txt) ,不 做 任何 修改 ,鼠标 单 击 
选择 菜单 “文件 ”一 “退出 ” 


5. 打开 一 个 Windows 记事 本 文件 ,做 修改 后 不 保存 ,鼠标 单 击 选择 菜单 < 文 
件 ” 一 “退出 ” 
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续 表 


字段 名 称 描 述 

1. 记事 本 未 做 修改 ,鼠标 单 击 菜单 “文件 ”一 “退出 ”, 能 正确 地 退出 应 用 程序 ， 
无 提示 信息 

2. 记事 本 做 修改 未 保存 或 者 另存 ,鼠标 单 击 菜单 “文件 ”>“ 退 出 ”, 会 提示 “未 
定 标题 文件 的 文字 已 经 改变 , 想 保存 文件 吗 ?”" 单 击 “ 是 ”Windows 将 打开 
保存 /另存 窗口 ; 单 击 “ 否 ”, 文 件 将 不 被 保存 并 退出 记事 本 程序 ; 单 击 “ 取 
消 ” 将 返回 记事 本 窗口 

测试 用 例 间 的 关联 “| 1009( 快 捷 键 测试 ) 


输出 标准 


13.1.3 测试 用 例 设计 的 考虑 因素 


在 测试 用 例 的 编写 过 程 中 ,需要 考虑 以 下 这 些 基本 因素 : 

(1) 测试 用 例 必须 具有 代表 性 、 典 型 性 。 一 个 测试 用 例 能 基本 涵盖 一 组 特定 的 情形 ， 
目标 明确 ,这 可 能 要 借助 测试 用 例 设 计 的 有 效 方法 和 对 用 户 使 用 产品 的 准确 把 握 。 

(2) 设计 测试 用 例 , 是 寻求 系统 设计 、 功 能 设计 的 弱点 。 测 试用 例 需 要 确切 地 反映 
功能 设计 中 可 能 存在 的 各 种 问题 ,而 不 要 简单 复制 产品 规格 设计 说 明 书 的 内 容 。 同 
时 ,测试 用 例 还 需要 按照 功能 规格 说 明 书 的 要 求 进行 设计 ,将 所 有 可 能 的 情况 结合 起 

(3) 测试 用 例 需 要 考虑 到 正确 的 输入 ,也 需要 考虑 错误 的 或 者 异常 的 输入 ,以 及 需要 
分 析 怎 样 使 得 这 样 的 错误 或 者 异常 能 够 发 生 。 例 如 ,电子 邮件 地 址 校 验 的 时 候 , 不 仅 需 要 
考虑 到 正确 的 电子 邮件 地 址 (如 pass@web. com) 的 输入 ,同时 需要 考虑 错误 的 、 不 合法 的 
(如 没有 @ 符 号 的 输入 ) ,或 者 带 有 异常 字符 ( 单 引 号 、 斜 杠 、 双 引号 等 ) 的 电子 邮件 地 址 输 
入 ,尤其 是 在 做 Web 页 面 测试 的 时 候 ,通常 会 出 现 一 些 字符 转 义 问题 而 造成 异常 情况 的 
发 生 。 

(4) 用 户 测 试用 例 设 计 , 要 多 考虑 用 户 实际 使 用 场景 。 用 户 测试 用 例 是 基于 用 户 实 
际 的 可 能 场景 ,从 用 户 的 角度 来 模拟 程序 的 输入 ,从 而 针对 程序 来 进行 的 测试 用 例 。 用 户 
测试 用 例 不 仅 需要 考虑 用 户 实 际 的 环境 因素 ,例如 在 Web 程序 中 需要 对 用 户 的 连接 速 
度 .负载 进行 模拟 ,还 需要 考虑 各 种 网 络 连接 方式 的 速度 。 在 本 地 化 软件 测试 时 ,需要 尊 
重用 户 所 在 国家 、 区 域 的 风俗 ,语言 以 及 习惯 用 法 。 


13.1.4 ”测试 用 例 设计 的 基本 原则 


在 测试 用 例 设计 时 ,除了 需要 遵守 基本 的 测试 用 例 编写 规范 外 ,还 需要 遵循 一 些 基 本 
原则 : 

(1) 避免 含糊 的 测试 用 例 。 含 糊 的 测试 用 例 给 测试 过 程 带 来 困难 ,甚至 会 影响 测试 
的 结果 。 在 测试 过 程 中 ,测试 用 例 的 状态 是 唯一 的 ,一 般 是 下 列 三 种 状态 中 一 种 , 即 : 通 
过 (Pass) .未 通过 (Failed) 和 未 进行 测试 (Not Done) 。 
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如 果 测 试 未 通过 ,一 般 会 有 对 应 的 缺陷 报告 与 之 关联 ;如 未 进行 测试 , 则 需要 说 明 原 
因 ( 测 试用 例 条 件 不 具备 、 缺 乏 测试 环境 或 测试 用 例 目前 已 不 适用 等 )。 因 此 ,清晰 的 测试 
用 例 使 测试 人 员 在 进行 测试 过 程 中 不 会 出 现 模 校 两 可 的 情况 ,对 一 个 具体 的 测试 用 例 不 
会 有 “部 分 通过 ,部 分 未 通过 ”这 样 的 结果 。 如 果 按 照 某 个 测试 用 例 的 描述 进行 操作 ,不 能 
找到 软件 中 的 缺陷 ,但 软件 实际 存在 和 这 个 测试 用 例 相 关 的 错误 ,这 样 的 测试 用 例 是 不 合 
格 的 ,将 给 测试 人 员 的 判断 带 来 困难 ,同时 也 不 利于 测试 过 程 的 跟踪 。 

(2) 尽量 将 具有 相 类 似 功能 的 测试 用 例 抽象 并 归 类 。 对 相 类 似 的 测试 用 例 的 抽象 过 
程 非常 重要 ,一 个 好 测试 用 例 应 该 是 能 代表 一 组 同类 的 数据 ,或 相似 的 数据 处 理 逻 辑 
过 程 。 

(3) 尽量 避免 元 长 和 复杂 的 测试 用 例 。 这 样 做 的 主要 目的 是 保证 在 测试 执行 过 程 中 
测试 用 例 验证 结果 的 唯一 性 ,从 而 便于 跟踪 和 管理 。 在 一 些 很 长 和 复杂 的 测试 用 例 设计 
过 程 中 ,需要 将 测试 用 例 进行 合理 的 分 解 ,从 而 保证 测试 用 例 的 准确 性 。 在 某 些 时 候 , 测 
试用 例 包 含 很 多 不 同类 型 的 输入 或 者 输出 ,或 者 测试 过 程 的 逻辑 复杂 而 不 连续 ,此 时 需要 
对 测试 用 例 进 行 分 解 。 

设计 测试 用 例 时 应 该 注意 : 

(1) 基于 测试 需求 的 原则 。 应 按照 测试 类 别 的 不 同 要 求 , 设 计 测 试用 例 。 如 ,单元 测 
试 依据 详细 设计 说 明 集成 测试 依据 概要 设计 说 明 ,配置 项 测试 依据 软件 需求 规格 说 明 系 
统 测试 依据 用 户 需求 (系统 / 子 系统 设计 说 明 、 软 件 开 发 计划 等 ) 。 

(2) 基于 测试 方法 的 原则 。 应 明确 所 采用 的 测试 用 例 设计 方法 。 为 达到 不 同 的 测试 
充分 性 要 求 ,应 采用 相应 的 测试 方法 ,如 等 价 类 划分 、. 边 界 值 分 析 、 猜 错 法 、 因 果 图 等 方法 。 

(3) 兼顾 测试 充分 性 和 效率 的 原则 。 测 试用 例 集 应 兼顾 测试 的 充分 性 和 测试 的 效 
率 ;每 个 测试 用 例 的 内 容 也 应 完整 ,具有 可 操作 性 。 

(4) 测试 执行 的 可 再 现 性 原则 。 应 保证 测试 用 例 执行 的 可 再 现 性 。 


13.2 测试 用 例 要 素 


每 个 测试 用 例 应 包括 以 下 要 素 : 

(1) 名 称 和 标识 。 每 个 测试 用 例 应 有 唯一 的 名 称 和 标识 符 。 

(2) 测试 追踪 。 说 明 测试 所 依据 的 内 容 来 源 。 如 系统 测试 依据 的 是 用 户 需求 ,配置 
项 测试 依据 的 是 软件 需求 ,集成 测试 和 单元 测试 依据 的 是 软件 设计 。 

(3) 用 例 说 明 。 简 要 描述 测试 的 对 象 \ 目 的 和 所 采用 的 测试 方法 。 

(4) 测试 的 初始 化 要 求 。 应 考虑 下 述 初 始 化 要 求 : 

@ 硬件 配置 。 被 测 系统 的 硬件 配置 情况 ,包括 硬件 条 件 或 电气 状态 。 

@ 软件 配置 。 被 测 系统 的 软件 配置 情况 ,包括 测试 的 初始 条 件 。 

@ 测试 配置 。 测 试 系统 的 配置 情况 ,如 用 于 测试 的 模拟 系统 和 测试 工具 等 的 配置 


情况 。 
@ 参数 设置 。 测 试 开始 前 的 设置 如 标志 、 第 一 断 点 指针、 控制 参数 和 初始 化 数 
据 等 。 
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@ 其 他 对 测试 用 例 的 特殊 说 明 。 

(5) 测试 的 输入 。 在 测试 用 例 执行 中 发 送 给 被 测 对 象 的 所 有 测试 命令 .数据 和 信和 号 
等 。 对 于 每 个 测试 用 例 应 提供 如 下 内 容 : 

Q@ 每 个 测试 输入 的 具体 内 容 ( 例 如 确定 的 数值 状态 或 信号 等 ) 及 其 有 效 值 、 无 效 值 、 
边界 值 等 ; 

@ 测试 输入 的 来 源 ( 例 如 测试 程序 产生 、 磁 盘 文件 ,通过 网 络 接收 、 人 工 键盘 输入 等 ) 
以 及 选择 输入 所 使 用 的 方法 (例如 等 价 类 划分 .边界 值 分 析 、 错 误 推 测 、 因 果 图 、 功 能 
图 等 ); 

@ 测试 输入 是 真实 的 还 是 模拟 的 ; 

@ 测试 输入 的 时 间 顺 序 或 事件 顺序 。 

(6) 期 望 的 测试 结果 。 说 明 测 试用 例 执行 中 由 被 测 软件 所 产生 的 期 望 的 测试 结果 ， 
即 经 过 验证 、 认 为 正确 的 结果 。 必 要 时 应 提供 中 间 的 期 望 结果 。 期 望 测 试 结果 应 该 有 具 
体内 容 , 如 确定 的 数值 ,状态 或 信号 等 ,不 应 是 不 确切 的 概念 或 笼统 的 描述 。 

(7) 评价 测试 结果 的 准则 。 判 断 测试 用 例 执行 中 产生 的 中 间 和 最 后 结果 是 否 正确 的 
准则 。 对 于 每 个 测试 结果 应 根据 不 同情 况 提供 如 下 信息 : 

QO 实际 测试 结果 所 需 的 精度 ; 

@ 实际 测试 结果 与 期 望 结果 之 间 的 差异 允许 的 上 限 、 下 限 ; 

@ 时 间 的 最 大 和 最 小 间隔 ,或 事件 数目 的 最 大 和 最 小 值 ; 

@ 实际 测试 结果 不 确定 时 ,再 测试 的 条 件 ; 

@ 与 产生 测试 结果 有 关 的 出 错 处 理 ; 

@ 其 他 准则 。 

(8) 操作 过 程 。 实 施 测试 用 例 的 执行 步 又。 把 测试 的 操作 过 程 定义 为 一 系列 按照 执 
行 顺序 排列 的 相对 独立 的 步骤。 对 于 每 个 操作 应 提供 : 

QO 每 一 步 所 需 的 测试 操作 动作 ,测试 程序 的 输入 、 设 备 操作 等 ; 

@ 每 一 步 期 望 的 测试 结果 ; 

@ 每 一 步 的 评价 准则 ; 

@ 程序 终止 伴随 的 动作 或 差错 指示 ; 

@ 获取 和 分 析 实 际 测试 结果 的 过 程 。 

(9) 前 提 和 约束 。 在 测试 用 例 说 明 中 施加 的 所 有 前 提 条 件 和 约束 条 件 , 如 果 有 特别 
限制 .参数 偏差 或 异常 处 理 , 应 该 标识 出 来 并 要 说 明 它们 对 测试 用 例 的 影响 。 

(10) 测试 终止 条 件 说 明 测试 正常 终止 和 异常 终止 的 条 件 。 


13.3 ”测试 用 例 的 组 织 和 跟踪 


测试 用 例 是 为 实现 有 效 的 测试 服务 的 ,将 这 些 测试 用 例 完 整地 结合 到 测试 过 程 中 加 
以 使 用 ,涉及 测试 用 例 的 组 织 、 跟 踪 和 维护 问题 。 
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13.3.1 测试 用 例 的 属性 


在 整个 测试 设计 和 执行 过 程 中 ,可 能 涉及 很 多 的 、 不 同类 型 的 测试 用 例 , 这 要 求 测试 
人 员 能 有 效 地 对 这 些 测试 用 例 进 行 组 织 。 为 了 组 织 好 测试 用 例 ,必须 了 解 测试 用 例 所 具 
有 的 属性 。 不 同 的 阶段 ,测试 用 例 的 属性 也 不 同 ,如 图 13-1 所 示 。 基 于 这 些 属性 ,可 以 采 
用 数据 库 方式 更 有 效 地 管理 测试 用 例 。 


输入 标准 


关联 的 测试 用 例 


所 属 的 测试 模块 / 
测试 组 件 /测试 计划 


测试 用 例 


所 属 的 测试 过 程 / 
测试 任务 /测试 执行 


测试 环境 和 平台 


关联 的 软件 错误 
或 注释 


执行 过 程 


图 13-1 各 个 阶段 所 表现 的 测试 用 例 属性 


(1) 测试 用 例 的 编写 过 程 : 标识 符 、 测 试 环境 、 输 入 标准 、 输 出 标准 、 关 联 测 试用 例 
标识 。 

(2) 测试 用 例 的 组 织 过 程 : 所 属 的 测试 模块 /测试 组 件 /测试 计划 ,优先 级 、 类 型 等 。 

(3) 测试 用 例 的 执行 过 程 : 所 属 的 测试 过 程 /测试 任务 /测试 执行 ,测试 环境 和 平台 、 
测试 结果 、 关 联 的 软件 错误 或 注释 。 

其 中 标识 符 ,测试 环境 、 输 入 标准 \ 输 出 标准 等 构成 了 测试 用 例 的 基本 要 素 , 前 面 已 经 
做 了 介绍 ,而 其 他 具体 属性 包括 : 

(1) 优先 级 (Priority) ,优先 级 越 高 ,被 执行 的 时 间 越 早 , 执 行 的 频率 越 高 。 由 最 高 优 
先 级 的 测试 用 例 构成 基本 验证 测试 (Basic Verification Test,BVT), 每 次 构建 软件 包 时 ， 
都 要 被 执行 一 遍 。 

(2) 目标 性 ,包括 功能 性 性能、 容错 性 .数据 迁移 等 各 方面 的 测试 用 例 。 

(3) 所 属 的 范围 ,属于 哪 一 个 组 件 或 模块 ,这 种 属性 可 以 和 需求 .设计 等 联系 起 来 ,有 
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利于 整个 软件 开发 生命 周期 的 管理 。 

(4) 关联 性 ,测试 用 例 一 般 和 软件 产品 特性 相 联系 ,通过 这 种 关联 性 可 以 了 解 每 个 功 
能 点 是 否 有 测试 用 例 覆 盖 ` 有 多 少 个 测试 用 例 槛 盖 , 从 而 确定 测试 用 例 的 覆盖 率 。 

(5) 阶段 性 ,属于 单元 测试 .集成 测试 .系统 测试 .验收 测试 中 的 某 一 个 阶段 ,这 样 可 
以 针对 阶段 性 测试 任务 快速 构造 测试 用 例 集 合 ,用 于 执行 。 

(6) 状态 ,当前 是 否 有 效 。 如 果 无 效 ,被 置 于 Inactive 状态 ,不 会 被 运行 ,只 有 激活 
(Active) 状 态 的 测试 用 例 才 被 运行 。 

(7) 时 效 性 ,不 同 版 本 所 适用 的 测试 用 例 可 能 不 同 , 因 为 产品 功能 在 一 些 新 版 本 上 可 
能 会 发 生变 化 。 

(8) 所 有 者 \ 日 期 等 特性 ,描述 测试 用 例 是 由 谁 \ 在 什么 时 间 创建 和 维护 的 。 


13.3.2 测试 套件 及 其 构成 方法 


组 织 测试 用 例 的 方法 ,一 般 采 用 自 项 向 下 的 方法 。 首 先 在 测试 计划 中 确定 测试 策略 
和 测试 用 例 设计 的 基本 方法 ,有 时 会 根据 功能 规格 说 明 书 来 编制 测试 规格 说 明 书 , 如 
图 13-2 所 示 ,而 多 数 情况 下 会 直接 根据 功能 规格 说 明 书 来 编写 具体 的 测试 用 例 。 


测试 设计 规格 说 明 


区 计 规格 wn | 


测试 用 例 规格 说 明 | 区 过 
测试 过 程 规格 说 明 


图 13-2 测试 用 例 组 织 


测试 设计 功能 说 明 


在 测试 用 例 组 织 和 执行 过 程 中 ,还 需要 引入 一 个 新 概念 一 一 测试 套件 (test suite)。 
测试 套件 是 根据 特定 的 测试 目标 和 任务 而 构造 的 某 个 测试 用 例 的 集合 。 这 样 ,为 完成 相 
应 的 测试 任务 或 达到 某 个 测试 目标 ,只 要 执行 所 构造 的 测试 套件 ,使 执行 任务 更 明确 、 更 
简单 ,有 利于 测试 项 目的 管理 。 测 试 套件 可 以 根据 测试 目标 、 测 试用 例 的 特性 和 属性 ( 优 
先 级 、 层 次 ,模块 等 ) ,来 选择 不 同 的 测试 用 例 , 构 成 满足 特定 的 测试 任务 要 求 的 测试 套件 ， 
如 基本 功能 测试 套件 、 负 面 测试 套件 .Mac 平台 兼容 性 测试 套件 等 。 

为 构造 有 效 的 测试 套件 ,通常 使 用 以 下 几 种 方法 来 组 织 测试 用 例 : 

(1) 按照 程序 的 功能 模块 。 软 件 产 品 是 由 不 同 的 功能 模块 构造 而 成 的 ,因此 , 按 程序 
的 功能 模块 组 织 测 试用 例 是 一 种 很 好 的 方法 。 将 属于 不 同 模块 的 测试 用 例 组 织 在 一 起 ， 
能 够 很 好 地 检查 测试 所 覆盖 的 内 容 ,实现 准确 的 执行 测试 计划 。 
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(2) 按照 测试 用 例 的 类 型 。 将 不 同类 型 的 测试 用 例 按照 类 型 进行 分 类 组 织 测试 也 是 
一 种 常见 的 方法 。 一 个 测试 过 程 中 ,可 以 将 功能 /逻辑 测试 、 压 力 /负载 测试 .异常 测 试 兼 
容 性 测试 等 具有 相同 类 型 的 用 例 组 织 起 来 .形成 每 个 阶段 或 每 个 测试 目标 所 需 的 测试 用 
例 组 或 集合 。 

(3) 按照 测试 用 例 的 优先 级 。 和 软件 错误 相 类 似 , 测 试用 例 拥有 不 同 优先 级 ,测试 人 
员 可 以 按照 测试 过 程 的 实际 需要 ,定义 测试 用 例 的 优先 级 ,从 而 使 得 测试 过 程 有 层次 、 有 
主 次 地 进行 。 

以 上 各 种 方式 中 ,根据 程序 的 功能 模块 进行 组 织 是 最 常用 的 方法 ,同时 可 以 将 3 种 方 
式 混 合 起 来 ,灵活 运用 ,例如 可 以 先 按照 不 同 的 程序 功能 块 将 测试 用 例 分 成 若干 个 模块 ， 
再 在 不 同 的 模块 中 划分 出 不 同类 型 的 测试 用 例 , 按 照 优 先 级 顺序 进行 排列 ,这 样 ,就 能 形 
成 一 个 完整 而 清晰 的 组 织 框架 。 

如 图 13-3 所 示 ,体现 了 测试 用 例 组 织 和 测试 过 程 的 关系 ,这 是 基于 前 面 的 测试 用 例 
特性 分 析 , 以 及 如 何 有 效 地 完成 测试 获得 的 。 这 个 过 程 可 以 简单 描述 如 下 ; 


一 一 一 一 一 一 一 ”| 测试 执行 
测试 套件 | 


测试 计划 
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测试 模块 


EE 
莹 
[a 
二 


测试 用 例 


测试 用 例 


测试 用 例 | | 测试 用 例 NA 0 ” 


图 13-3 测试 用 例 的 组 织 和 测试 过 程 的 关系 


(1) 测试 模块 由 该 模块 的 各 种 测试 用 例 组 织 起 来 ; 

(2) 多 个 测试 模块 组 成 测试 套件 (测试 单元 ); 

(3) 测试 套件 加 上 所 需要 的 测试 环境 和 测试 平台 需求 组 成 测试 计划 ; 
(4) 测试 计划 确定 后 ,就 可 以 确定 相应 的 测试 任务 ; 

(5) 将 测试 任务 分 配给 测试 人 员 ; 

(6) 测试 人 员 执 行 测试 任务 ,完成 测试 过 程 ,并 报告 测试 结果 。 


13.3.3 跟踪 测试 用 例 


在 测试 执行 开始 之 前 ,测试 组 长 或 测试 经 理应 该 能 够 回答 下 面 一 些 问 题 : 
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整个 测试 计划 包括 哪些 测试 组 件 ? 

测试 过 程 中 有 多 少 测试 用 例 要 执行 ? 

在 执行 测试 过 程 中 ,使 用 什么 方法 来 记录 测试 用 例 的 状态 ? 

如 何 挑选 出 有 效 的 测试 用 例 来 对 某 些 模块 进行 重点 测试 ? 

上 次 执行 的 测试 用 例 的 通过 率 是 多 少 ? 哪些 是 未 通过 的 测试 用 例 ? 根据 这 些 问 
题 ,对 测试 执行 做 到 事先 心中 有 数 , 有 利于 跟踪 测试 用 例 执 行 的 过 程 ,控制 好 测试 
的 进度 和 质量 。 

前 面 提 到 ,测试 过 程 中 测试 用 例 有 3 种 状态 : 通过 、 未 通过 和 未 测试 。 根 据 测试 执行 
过 程 中 测试 用 例 的 状态 ,针对 测试 用 例 的 执行 和 输出 而 进行 跟踪 ,从 而 达到 测试 过 程 的 可 
管理 性 以 及 完成 测试 有 效 性 的 评估 。 

跟踪 测试 用 例 , 包 括 两 个 方面 的 内 容 : 

(1) 测试 用 例 执 行 的 跟踪 。 良 好 的 测试 用 例 自身 具有 易 组 织 性 、 可 评估 性 和 管理 性 ， 
实现 测试 用 例 执行 过 程 的 跟踪 可 以 有 效 地 将 测试 过 程 量化 。 例 如 ,在 一 轮 测试 执行 中 , 测 
试 人 员 需 要 知道 总 共 执 行 了 多 少 个 测试 用 例 ,每 个 测试 人 员 平 均 每 天 能 执行 多 少 个 测试 
用 例 ,测试 用 例 中 * 通 过 ,未 通过 以 及 未 测试 的 ?各 占 多 少 , 测 试用 例 不 能 被 执行 的 原因 是 
什么 。 当 然 , 这 是 个 相对 的 过 程 ,测试 人 员工 作 量 的 跟踪 不 应 该 仅仅 凭借 测试 用 例 的 执行 
情况 和 发 现 的 程序 缺陷 多 少 来 判定 ,但 至 少 ,可 以 通过 测试 执行 情况 的 跟踪 大 致 判定 当前 
的 项 目 进度 和 测试 的 质量 ,并 能 对 测试 计划 的 执行 做 出 准确 的 推断 ,以 决定 是 否 要 调整 。 

(2) 测试 用 例 著 盖 率 的 跟踪 。 是 指 根据 测试 用 例 进 行 测试 的 执行 结果 与 实际 的 软件 
存在 的 问题 的 比较 ,从 而 实现 对 测试 有 效 性 的 评估 。 

如 图 13-4 所 示 , 在 一 个 测试 执行 中 ,92% 的 测试 用 例 通过 ,5% 的 测试 用 例 未 通过 ， 
3% 的 测试 用 例 未 使 用 。 在 发 现 的 软件 缺陷 和 错误 中 ,有 92% 是 通过 测试 用 例 检测 出 
来 的 ,而 有 10% 是 未 通过 测试 用 例 检 验 出 来 的 ,此 时 ,测试 人 员 需 要 对 这 些 软 件 错误 进 
行 分 类 和 数据 分 析 ,完善 测试 用 例 , 从 而 提高 测试 结果 的 准确 性 ,使 问题 遗漏 的 可 能 性 
最 小 化 。 


5% 3% 


(a) 测试 用 例 跟 踪 图 (b) 发 现 的 软件 错误 跟踪 图 
13-4 测试 用 例 覆盖 率 的 跟踪 


图 13-5 是 针对 每 个 测试 模块 的 测试 用 例 的 跟踪 示意 图 ,通过 对 比 , 不 难 发 现 ,模块 二 
和 模块 三 的 未 通过 率 和 未 使 用 率 都 比较 高 ,此 时 测试 组 长 需要 对 这 两 个 模块 的 测试 用 例 
以 及 测试 过 程 进行 分 析 , 是 这 个 模块 的 测试 用 例 设计 不 合理 ,还 是 模块 本 身 存 在 太 多 的 软 
件 缺 陷 。 根 据 实 际 的 数据 分 析 , 可 以 对 这 两 个 模块 重新 进行 单独 测试 ,通过 纵向 的 数据 比 
较 , 来 实现 软件 质量 的 管理 和 改进 。 
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13-5 ”模块 测试 用 例 跟踪 图 


凭借 个 人 的 记忆 来 跟踪 测试 用 例 几乎 是 不 可 能 的 ,一 般 会 采用 下 列 方法 来 跟踪 测试 
用 例 : 

(1) 书面 文档 : 在 小 规模 的 测试 项 目 中 ,使 用 书面 文档 记录 和 跟踪 测试 用 例 是 可 行 
的 方法 ,但 作为 组 织 和 搜索 数据 进行 分 析 时 ,会 遇 到 较 大 的 困难 。 

(2) 电子 表格 : 流行 而 高 效 的 方法 是 使 用 电子 表格 来 跟踪 和 记录 测试 的 过 程 ,通过 
表格 列 出 测试 用 例 的 跟踪 细节 ,可 以 直观 地 看 到 测试 的 结果 ,包括 关联 的 缺陷 ,然后 利用 
电子 表格 的 功能 比较 容易 进行 汇总 、 统 计 分 析 , 为 测试 管理 和 软件 质量 评估 提供 更 有 价值 
的 数据 。 

(3) 数据 库 是 一 种 理想 的 方式 ,通过 基于 数据 库 的 测试 用 例 管理 系统 ,非常 容易 跟踪 
测试 用 例 的 执行 和 计算 覆盖 率 。 测 试 人 员 通 过 浏览 器 将 测试 的 结果 提交 到 系统 中 ,并 通 
过 自己 编写 的 工具 生成 报表 、 分 析 图 等 ,更 有 效 地 管理 和 跟踪 整个 的 测试 过 程 。 


13.3.4 维护 测试 用 例 


测试 用 例 不 是 一 成 不 变 的 , 当 一 个 阶段 测试 过 程 结束 后 ,或 多 或 少 会 发 现 一 些 测试 用 
例 编写 得 不 够 合理 ,需要 完善 。 而 同一 个 产品 新 版 本 测试 中 要 尽量 使 用 已 有 的 测试 用 例 ， 
但 某 些 原 有 功能 已 发 生 了 变化 ,这 时 也 需要 去 修改 那些 受 功能 变化 影响 的 测试 用 例 ,使 之 
具有 良好 的 延续 性 。 所 以 ,测试 用 例 的 维护 工作 是 不 可 缺少 的 。 测 试用 例 更 新 的 可 能 原 
因 见 表 13-3。 

表 13-3 ”测试 用 例 维护 情况 一 览 表 
原 因 更 新 时 间 优 先 级 


先前 的 测试 用 例 设 计 不 全 面 或 者 不 够 准确 , 随 着 
测试 过 程 的 深入 和 对 产品 功能 特性 的 更 好 理解 ，| 测试 过 程 中 | 高 ,需要 及 时 更 新 
发 现 测试 用 例 存在 一 些 逻 辑 错误 ,需要 纠正 


所 发 现 的、 严重 的 软件 缺陷 没有 被 目前 的 测试 用 


测试 过 程 中 | 高 ,需要 及 时 更 新 


例 所 覆盖 

新 的 版 本 中 添加 新 功能 或 者 原 有 功能 的 增强 ,要 本 

求 测试 用 例 做 相应 改动 测试 过 程 前 | 高 ,需要 在 测试 执行 前 更 新 
测试 用 例 不 规范 或 者 描述 语句 错误 测试 过 程 中 | 中 ,尽快 修复 ,以 免 引 起 误解 


旧 的 测试 用 例 已 经 不 再 使 用 ,需要 删除 测试 过 程 后 | 中 ,尽快 修复 ,以 提高 测试 效率 
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维护 测试 用 例 的 过 程 是 实时 的 ,长 期 的 。 和 编写 测试 用 例 不 同 , 维 护 测试 用 例 一 般 不 
涉及 测试 结构 的 大 改动 ,例如 在 某 个 模块 里 面 ,如 果 先 前 的 测试 用 例 已 经 不 能 覆盖 目前 的 
测试 内 容 , 可 能 需要 重新 定义 一 个 独立 的 测试 模块 单元 来 重新 组 织 新 的 测试 用 例 。 但 在 
系统 功能 进行 重 构 时 ,测试 用 例 也 会 随 之 重 构 。 

(1) 任何 人 员 ( 包 括 开发 人 员 产品 设计 人 员 等 ) 发 现 测试 用 例 有 错误 或 者 不 合理 ,向 
编写 者 提出 测试 用 例 修 改建 议 , 并 提供 足够 的 理由 。 

(2) 测试 用 例 编写 者 (修改 者 ) 根 据 测试 用 例 的 关联 性 和 修改 意见 ,对 特定 的 测试 用 
例 进 行 修改 。 

(3) 向 开发 ,项 目 组 长 (经 理 ) 递 交 修 改 后 的 测试 用 例 。 

(4) 项 目 组 长 .开发 人 员 以 及 测试 用 例 编写 者 进行 复核 后 提出 意见 ,通过 后 ,由 测试 
用 例 编写 者 进行 最 后 的 修改 ,并 提供 修改 后 的 文档 和 修改 日 志 。 


13.3.5 测试 用 例 的 覆盖 率 


测试 用 例 的 获 盖 率 是 评估 测试 过 程 以 及 测试 计划 的 一 个 参考 依据 , 它 根据 测试 用 例 
进行 测试 的 执行 结果 与 软件 实际 存在 的 问题 进行 比较 ,从 而 获得 测试 有 效 性 的 评估 结果 。 
例如 ,确定 哪些 测试 用 例 是 在 发 现 缺 陷 之 后 又 补充 进来 的 ,这 样 就 可 以 给 出 测试 用 例 的 覆 
盖 率 。 

如 果 想 更 科学 地 判断 测试 用 例 缆 盖 率 ,可 以 通过 测试 工具 来 监控 测试 用 例 执行 的 过 
程 ,然后 根据 获得 的 代码 行 覆盖 率 、 分 支 或 条 件 覆 盖 率 来 确定 测试 用 例 的 覆盖 率 。 需 要 对 
低 获 盖 率 的 测试 用 例 进行 数据 分 析 , 找 出 问题 的 根本 原因 ,从 而 更 有 针对 性 地 修改 测试 用 
例 ,更 有 效 地 组 织 测试 过 程 。 例 如 ,通过 了 解 哪些 缺陷 没有 测试 用 例 获 盖 ,可 以 针对 这 些 
缺陷 添加 相应 的 测试 用 例 , 这 样 就 可 以 提高 测试 用 例 的 质量 。 

当然 ,测试 用 例 的 覆盖 率 并 非 一 个 绝对 的 判定 因素 , 它 对 整个 测试 过 程 起 到 的 ,是 一 
个 分 析 和 参考 的 作用 。 


13.4 习题 


请 参考 课文 内 容 以 及 其 他 资料 ,完成 下 列 选择 题 。 
(1) 仅 根 据 规 格 说 明 书 描述 的 程序 功能 来 设计 测试 用 例 的 方法 称 为 ( ”)。 
A. 白 盒 法 B. 静态 测试 法 C. 黑 盒 法 D. 人 工分 析 法 
(2) 正 向 测试 的 测试 用 例 用 于 验证 被 测 单元 的 功能 和 性 能 指标 是 否 能 够 兑现 ,而 反 
向 测试 的 测试 用 例 则 是 要 检查 被 测 单 元 是 否 做 了 ( We 
A. 应 该 做 的 事情 B. 不 该 做 的 事情 
C. 有 错误 的 事情 D. 有 性 能 缺陷 的 事情 
(3) 下 面 有 关 测 试 原则 的 说 法 中 正确 的 是 ( hh 
A. 测试 用 例 应 由 测试 的 输入 数据 和 预期 的 输出 结果 两 部 分 组 成 
B. 测试 用 例 只 需 选取 合理 的 输入 数据 
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C. 程序 最 好 由 编写 该 程序 的 程序 员 自 己 来 测试 

D. 使 用 测试 用 例 进行 测试 是 为 了 检查 程序 是 否 做 了 它 应 该 做 的 事 
(4) 以 下 测试 用 例 哪 一 组 能 够 满足 判定 -条 件 覆 盖 ? ( ) 

A. (a=2, b=0, c=6).(a=1, b=1, c=1) 

B. (a=8, b=7, c=114),(a=33, b=50, c=32) 

C. (a=29, b=20, c=25).(a=3, b=9, c=36) 

D. (a=21, b=20, c=62).(a=22, b=40, c=24) 

(5) 为 了 提高 测试 的 效率 ,正确 的 做 法 是 ( ”)。 

A. 选择 发 现 错误 可 能 性 大 的 数据 作为 测试 用 例 
B. 随机 选取 测试 用 例 

C. 在 完成 程序 的 编码 之 后 再 制定 软件 的 测试 计划 
D. 取 一 切 可 能 的 输入 数据 作为 测试 用 例 

(6) 考虑 一 个 计算 平方 根 的 函数 ,其 规格 说 明 如 下 : 

。 输入: 浮 点 数 。 

。 输 出 : 浮 点 数 。 

。 规格 : 当 输 入 一 个 大 于 或 等 于 零 的 浮 点 数 时 ,函数 输出 其 正 的 平方 根 并 返回 true; 
当 输 入 一 个 小 于 0 的 浮 点 数 时 ,函数 显示 输出 错 信 息 “ 非 法 输入 值 ” 并 返回 
false。 

按照 规范 导出 法 ,应 设计 的 测试 用 例 数 至 少 应 为 ( 

A. 1 B. 2 C. 3 D. 4 
(7) 为 了 提高 测试 的 效率 ,正确 的 做 法 是 ( 站 
A. 选择 发 现 错误 可 能 性 大 的 数据 作为 测试 用 例 
B. 随机 选取 测试 用 例 
C. 在 完成 程序 的 编码 之 后 再 制定 软件 的 测试 计划 
D. 取 一 切 可 能 的 输入 数据 作为 测试 用 例 

(8) 设 有 一 段 程序 如 下 : 
if ((a==b) and ((c==d) or (时 = 日 )) do 51 
else if ((p==9) or (==t)) do S2 


else do S3 
满足 判定 -条 件 覆 盖 的 要 求 下 ,最少 的 测试 用 例 数 目 是 (  )。 
A. 6 B. 8 C3 D. 4 


13.5 实验 与 思考 
13.5.1 实验 目的 


本 节 “ 实 验 与 思考 ”的 目的 : 
(1) 熟悉 软件 测试 用 例 的 设计 与 维护 的 相关 概念 。 
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(2) 分 析 一 个 计算 输入 数字 的 阶乘 的 C 程序 段 , 画 出 此 程序 主 函 数 的 控制 流程 图 ; 设 
计 一 组 测试 用 例 ,使 该 程序 所 有 函数 的 语句 覆盖 率 和 分 支 覆 盖 率 均 能 达到 100%。 

(3) 分 析 一 段 用 来 判定 用 户口 令 的 C++ 程序 , 画 出 此 程序 主 函 数 的 控制 流程 图 ; 设 
计 一 组 测试 用 例 , 使 该 程序 所 有 函数 的 语句 获 盖 率 和 分 支 获 盖 率 均 能 达到 100%。 


13.5.2 工具 /准备 工作 


在 开始 本 实验 之 前 ,请 认真 阅读 课程 的 相关 内 容 。 
需要 准备 一 台 带 有 浏览 器 、 能 够 访问 因特网 的 计算 机 。 


13.5.3 实验 内 容 与 步骤 


1) 以 下 是 一 个 C 程序 段 , 其 功能 为 计算 输入 数字 的 阶乘 。 请 仔细 阅读 程序 并 完成 
要 求 。 

#include< stdio.h> 

#include< stdlib.h> 


int main() 
{ 
int i=0; /* 评 为 计数 器 * / 
int n; 
int factorial= 1; /* 保 存 阶乘 的 结果 * / 


Puts("* The Program will ompute *"); 
puts("* the factorial of an integer *"); 
Puts ("please input the nunber n: "); 
scanf (% d", gn); 
if o<0) /* 判断 输入 的 数 是 否 大 于 或 等 于 0x / 
{ 
Printf ("please input an integer>=0. \n "); 
retum 0; 
} 
if or=0) /* 0 的 阶乘 是 1* / 
{ 
printf ("factorial of 0 is 1. \n"); 
retum 0; 
} 
ey 
while (i<=n) { 
factorial= factorial * i; 
计生 
} 
printf ("factorial of% d is:%d. \n", ny factorial); 
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getch()7 
retum 07 
} 


(1) 请 在 一 白 纸 上 画 出 此 程序 主 函 数 的 控制 流程 图 ,并 粘贴 于 此 处 (相关 说 明 请 标注 
于 图 目 )。 


(2) 设计 一 组 测试 用 例 , 使 该 程序 所 有 函数 的 语句 覆盖 率 和 分 支 柳 盖 率 均 能 达到 
100%。 如 果 认 为 该 程序 的 语句 或 分 支 获 盖 率 无 法 达到 100%, 需 说 明理 由 。 

测试 用 例 : 

2) 以 下 是 一 段 C++ 程序 ,用 来 判定 用 户口 令 。 请 仔细 阅读 程序 并 完成 要 求 。 


// 口令 检验 程序 // 
1/ 文件 名 : Password check.aqpp 1/ 
#include< iostream.h> 

#include< string.h> 


A/ 主 函数 // 
void main (void) 
1 

char password[128]= { "\0' }; 

cout << "请 输入 您 的 口令 : "; 


cout.flush(); 


while (true) { 
cin.getline (password, 128; '\n'); 
证 (strlen (password)< 6) /口令 长 度 少 于 6 位 
{ 
cout << "您 的 用 户口 令 少 于 6 个 字符 ! " <<endl; 
cout << "请 重新 输入 : "; 


cout.flush (); 

} else { 
bool capital= false; // 检 验 是 否 有 大 写字 母 
bool lowercaser false; // 检 验 是 否 有 小 写字 母 
bool digit= false; // 检 验 是 否 有 数字 


for (unsigned int i=0; i< strlen (password); 计 +) { 
证 (password[i]>= 'A' ss Password[i]<= "2") 
capital= true; 
证 (password[i]>= 'a' ss password[i]<="z") 
lowercase= true; 
证 (password[i]>= '0' sg password[i]<= "9") 
digit=true; 


295[ 一 一 一 一 一 一 一 一 


《软件 测试 技术 与 实践 》 


/出 断 用 户 输入 的 口令 中 缺少 哪 种 字符 

if (capital) { 
cout << "您 的 用 户口 令 中 没有 大 写字 母 ! " << endl; 
cout << "请 重新 输入 : "; 

} else if (lowercase) { 
cout << "您 的 用 户口 令 中 没有 小 写字 母 ! " << endl; 
cout << "请 重新 输入 : "; 

} else if (digit) { 
cout <<" 您 的 用 户口 令 中 没有 数字 ! " << endl; 
cout << "请 重新 输入 : "; 


} else { 
cout << "处 的 口令 满足 要 求 ! " << endl; 
break; 


} 


(1) 请 在 一 白 纸 上 夯 出 此 程序 主 函数 的 控制 流程 图 ,并 粘贴 于 此 处 (相关 说 明 请 标注 
于 图 上 )。 


(2) 设计 一 组 测试 用 例 ,使 该 程序 所 有 函数 的 语句 获 盖 率 和 分 支 获 盖 率 均 能 达到 
100%。 如 果 认 为 该 程序 的 语句 或 分 支 覆 盖 率 无 法 达到 100%, 需 说 明理 由 。 
测试 用 例 : 


13.5.4 实验 总 结 


13.5.5 实验 评价 (教师 ) 
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13.6 阅读 与 分 析 : 关于 解 Bug 的 总 结 


1. 与 其 他 应 用 交互 的 Bug 


背景 : 一 个 手机 音乐 播放 器 ,多 媒体 通常 存放 在 手机 外 部 存储 卡 上 (SD card 上 )。 所 
以 只 有 当 SD 卡 Mount 到 手机 上 时 , 才 可 以 播放 媒体 。 音 乐 播放 器 就 会 监听 SD 卡 状 态 ， 
当 SD 卡 从 手 上 却 载 或 弹出 时 ,播放 器 会 保存 现场 并 停止 播放 ; 当 SD 卡 重新 Mount 回 手 
机 时 ,再 恢复 现场 和 继续 播放 。 也 即 当 播放 器 收 到 “SD 卡 Eject” 消 息 时 ,停止 , 当 收 到 
“SD 卡 Mount” 时 继续 播放 。 播 放 器 可 以 在 后 台 播 放 媒 体 。 

一 个 文件 管理 器 是 另外 一 个 应 用 程序 ,可 以 用 来 编辑 (如 删除 )SD 卡 上 的 文件 。 文 件 
发 生变 化 后 ,这 个 第 三 方 应 用 会 发 出 “SD 卡 Mount” 这 样 的 消息 ,以 便 告 知 其 他 应 用 和 系 
统 , 文 件 发 生 了 变化 。 

问题 : 当 播 放 器 在 后 台 播 放 媒 体 的 时 候 , 启 动 文件 管理 器 ,然后 随便 删除 一 个 文件 
(也 可 以 是 正在 播放 的 媒体 文件 ) ,这 时 候 , 播 放 器 停止 播放 媒体 ,并 且 当 打开 播放 器 时 ,发 
现 播放 器 是 处 于 播放 状态 的 ,但 是 却 没有 声音 。 

分 析 : 播放 器 不 会 没有 理由 地 去 停止 正在 播放 的 媒体 。 查 找 发 现 ,播放 器 停止 播放 
的 原因 有 几 个 : 用 户 请 求 停止 ,切换 媒体 时 ,SD 卡 Eject,SD 卡 Mount 时 。 经 过 调试 和 跟 
踪 上 日志 信息 ,发 现 前 面 3 种 情况 都 未 发 生 。 那 么 问题 的 原因 就 是 SD 卡 Mount 时 ,进行 了 
恢复 现场 的 操作 ,导致 媒体 停止 了 。 那 为 什么 会 进行 恢复 现场 的 操作 呢 , 因 为 SD 卡 并 未 
被 Eject 和 Mount。 进 一 步调 试 和 跟踪 日 志 发 现 , 当 文件 管理 器 删除 文件 后 会 发 出 “SD 
卡 Mount” 的 消息 ,以 便 告知 其 他 应 用 文件 发 生 了 变化 。 

解决 方案 : 当 分 析出 了 问题 出 现 的 原因 ,解决 起 来 就 容易 了 ,只 需要 让 播放 器 在 做 恢 
复 现场 的 动作 前 多 一 些 检 测 来 保证 ,先前 SD 卡 有 Eject 过 ,现在 确实 是 SD 卡 Mount 回 
来 。 否 则 ,应 该 忽略 这 个 消息 。 

教训 : 这 应 该 是 软件 缺陷 引起 的 Bug, 音 乐 播放 器 本 应 该 做 这 样 的 条 件 检 查 。 音 乐 
播放 器 本 身 的 策略 是 没有 错 的 , 当 没 有 其 他 应 用 程序 发 出 这 样 的 消息 时 , 它 是 完全 可 以 正 
常 工 作 的 。 这 是 一 个 典型 的 与 其 他 应 用 或 模块 交互 时 产生 的 Bug。 

对 于 这 类 Bug, 最 重要 的 线索 就 是 , 当 与 其 他 应 用 一 起 操作 时 会 出 现 问 题 。 这 个 Bug 
比较 简单 ,因为 很 明确 是 与 文件 管理 器 有 关 。 但 在 有 些 关 系 复杂 的 系统 中 , 当 出 现 了 问题 
时 ,很 难 搞 清 是 表现 问题 的 模块 出 了 问题 ,还 是 其 他 模块 出 了 问题 。 这 就 需要 调试 跟踪 日 
志 , 以 缩小 范围 。 在 调试 的 时 候 要 一 个 一 个 模块 地 试验 和 排除 ,以 缩小 范围 和 进 一 点 地 深 
入 调查 。 


2. 原因 与 问题 离 得 很 远 的 Bug 


背景 : 一 个 模块 专门 负责 处 理 SD 卡 上 的 多 媒体 文件 ,解析 这 些 文件 ,获取 它们 的 元 
信息 ,并存 入 到 媒体 数据 库 中 。 它 是 由 Java 和 C++ 以 JNI 方式 组 合 来 实现 的 。Java 进 
行 上 层 流程 控制 和 写 入 数据 库 操作 ;C++ 负责 解析 文件 获取 文件 元 信息 。 它 们 之 间 通 过 
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JNI 来 通信 。 

问题 : 当 处 理 一 个 特殊 的 文件 时 候 Java 的 JVM( 虚 拟 机 ) 会 异常 退出 (JVM abort)， 
并 打印 出 一 条 错误 信息 :“JNI Warning:illegal start byte 0xbl”。 

分 析 : 这 是 一 个 很 严重 的 错误 ,因为 它 会 导致 JVM 前 溃 , 进 程 也 会 被 内 核 杀 掉 。 唯 
一 的 线索 就 是 JVM 崩溃 时 打印 出 的 一 条 信息 *JNI Warning:illegal start byte 0xbl1”。 通 
过 搜索 这 条 消息 (幸亏 有 所 有 的 源 代 码 ) ,发现 它 是 由 JVM 内 部 的 CheckJNI.c 文 件 打印 
出 来 的 。 这 个 文件 是 JVM 中 比较 重要 的 一 个 文件 , 它 负 责 对 JNI 的 所 有 参数 进行 合法 
性 检查 ,特别 是 字 串 。 因 为 Java 中 用 的 是 Modified UTF-8 编码 格式 ,所 以 CheckJNI.c 
文件 就 会 对 所 传 进来 的 字 串 进行 编码 检查 ,如 果 字 串 不 是 一 个 合法 的 Modified UTF-8 格 
式 ,就 会 发 出 警告 并 停止 JVM。 这 里 找到 了 问题 所 在 ,是 因为 JVM 检查 到 了 不 合法 的 字 
串 才 导致 JVM 前 溃 的 。 那 么 不 合法 的 字 串 是 从 哪里 来 的 呢 ? 又 是 出 现在 哪个 模块 呢 ? 
因为 系统 中 有 无 数 地 方 在 用 到 JNI, 所 以 不 能 育 目 地 去 查找 。 又 由 于 这 是 在 媒体 扫描 器 
扫描 某 个 媒体 时 候 出 现 的 ,因此 主要 目标 锁定 在 媒体 扫描 器 的 JNI 部 分 。 媒 体 扫 描 器 的 
C++ 部 分 解析 多 媒体 文件 ,然后 把 所 得 到 的 结果 (通常 为 字 串 ) 通 过 JNI 传 回 给 Java 层 。 
问题 就 很 有 可 能 出 在 这 里 ,因为 多 媒体 文件 的 信息 有 多 种 编码 格式 ,其 中 元 信息 就 有 可 能 
是 非法 的 Modified UTF-8 编码 格式 。 经 过 调试 跟踪 ,发 现 ,确实 是 这 里 出 现 了 问题 。 

解决 方案 : 这 个 问题 的 解决 方案 仍 不 是 很 好 ,一 种 方法 是 对 其 进行 编码 转换 ,但 这 要 
知道 字 串 原来 的 编码 方式 。 另 一 种 简单 的 方法 就 是 在 传 给 JNI 之 前 做 一 次 编码 合法 性 检 
查 , 以 过 滤 不 合法 的 字 串 。 最 后 ,采用 了 后 一 种 方式 解决 了 这 个 问题 。 

教训 : 首先 ,系统 崩溃 时 所 给 出 的 信息 和 出 错时 给 出 的 信息 是 第 一 重要 的 线索 ,虽然 
它们 可 能 不 是 问题 真正 的 原因 ,但 是 从 它们 出 发 就 可 以 追踪 到 原因 。 其 次 ,错误 信息 ,是 
由 代码 打印 出 来 的 ,所 以 当 你 不 知道 是 哪个 模块 出 错时 ,可 以 用 错误 信息 对 源码 进行 局 部 
搜索 ,就 可 以 定位 出 模块 和 源码 位 置 。 最 后 ,如 果 是 一 系列 的 原因 导致 了 这 一 问题 ,那么 
可 以 在 最 源头 解 ,也 可 以 在 其 中 的 某 一 个 环节 来 解 ,只 要 不 会 导致 程序 崩溃 即 可 。 


3. 空 指针 异常 NullPointerException 


背景 : 在 C/C++ /Java 中 空 指针 异常 是 比较 常见 的 一 类 导致 程序 崩溃 的 原因 。 在 
C/C++/Java 中 , 如 果 使 用 的 指针 或 对 象 没有 正确 地 初始 化 , 则 很 容易 发 生 
NullPointerException 。 

问题 : 当 发 生 NullPointerException 的 时 候 , 程 序 通常 会 因 异 常 而 崩溃 的 。 但 通常 都 
会 打印 出 运行 时 的 堆栈 信息 

分 析 : 从 程序 的 堆栈 信息 ,会 很 容易 地 看 到 发 生 问 题 的 代码 位 置 ,这 样 就 可 以 找到 直 
接 原因 。 但 是 这 找到 问题 的 一 小 部 分 ,具体 是 什么 导致 对 象 为 空 , 这 就 不 是 那么 容易 调查 
出 原因 了 。 

解决 方案 : 对 于 这 类 问题 ,一 开始 能 想到 的 办 法 就 是 加 上 对 空 指针 的 检测 ,如 果 指 针 
或 对 象 为 空 的 话 就 不 对 其 进行 操作 。 但 这 是 行 不 通 的 ,这 也 不 是 正确 的 解决 方法 ,最 直接 
的 问题 就 是 , 当 指 针 为 空 的 时 候 应 该 去 做 什么 。 如 果 在 一 个 类 中 ,在 其 他 地 方 引 用 的 时 候 
都 做 了 空 指针 检测 ,而 这 个 地 方 没有 做 ,那么 可 以 仿照 其 他 地 方 那样 ,加 上 空 指针 检测 。 
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但 假如 不 是 这 样 的 情况 ,就 要 好 好 地 调查 一 下 指针 为 什么 会 是 空 ,而 非 处 理 空 指针 。 但 这 
通常 都 是 比较 困难 的 ,因为 要 去 追踪 对 象 是 从 哪里 来 的 ,又 在 哪里 被 修改 和 引用 ,是 在 哪 
里 初始 化 的 。 只 有 找到 了 真正 让 对 象 为 空 的 原因 ,才能 算是 比较 完整 地 解决 了 问题 。 但 
如 果 一 个 比较 复杂 的 系统 ,引用 的 地 方 很 多 , 且 假 如 又 涉及 多 线程 时 , 则 追踪 起 来 会 更 加 
的 困难 。 

教训 : 对 于 空 指针 问题 ,不 能 简单 地 加 上 一 个 条 件 。 要 进一步 地 深入 去 调查 是 什么 
导致 了 指针 为 空 。 除 非 ,你 有 充足 的 理由 去 加 上 条 件 。 


4. 无 解 的 问题 


案例 一 : 

背景 : 有 些 问题 是 极其 诡异 的 ,而 且 出 现 的 机 率 非 常 的 小 ,但 它们 还 是 会 出 现 ,但 是 
找 不 到 合适 的 解决 方案 。 

问题 : 在 一 个 GUI 系统 中 ,在 一 个 比较 基础 的 类 里 面 报 出 了 一 个 NullPointerException 。 
由 于 这 个 类 会 被 所 有 涉及 GUI 的 应 用 程序 所 使 用 。 

分 析 : 根据 程序 退出 时 打印 出 来 的 堆栈 信息 ,找到 了 发 生 异 常 的 代码 位 置 。 令 人 感 
到 惊讶 的 是 ,这 一 行 是 绝 不 可 能 发 生 空 指针 的 ,因为 它 用 的 都 是 基本 数据 类 型 。 上 下 几 十 
行 之 内 也 是 绝 不 可 能 发 生 NullPointer 的 。 

解决 方案 : 这 个 问题 ,始终 没有 找到 解决 方案 。 

案例 二 : 

背景 : 对 一 个 系统 做 大 规模 的 随机 压力 测试 。 一 个 对 象 的 类 Message 是 一 个 final 
的 类 , 且 其 重 载 了 toString() 方 法 , 它 会 按 如 下 格式 打印 信息 : " what 一 XXX when 一 
XXX XXXXXX }", 

问题 : 在 一 次 测试 过 程 中 ,系统 核心 进程 因 异 常 退 出 ,导致 系统 自动 重启 。 

分 析 : 问题 的 原因 是 在 核心 进程 中 发 生 了 一 个 RuntimeException, 并 有 一 条 消息 : 
'0x44bec: This message is already in use. "从 堆栈 找到 退出 的 位 置 的 代码 ,发 现 它 是 程 
序 检测 到 不 合理 的 操作 然后 抛 出 的 一 个 RuntimeException, 代 码 如 下 : 


AL/ 

if (msg.when !=0) { 

throw new RntimeFxosption (msgt " This message is already in use."); 
} 

L/ 


这 里 的 msg 是 一 个 Message 的 对 象 。 

通常 来 讲 会 调用 对 象 的 toString() 方 法 ,而 toString() 方 法 的 输出 又 有 特定 的 格式 ， 
所 以 ,这 里 就 发 生 了 让 人 极其 迷 意 的 事情 。 因 为 最 终 打 印 出 来 的 消息 跟 对 象 的 toString() 
有 很 大 的 差别 。 从 日 志 信 息 来 看 ,当前 对 象 应 该 是 一 个 char 数组 ,而 并 非 一 个 Message 
对 象 ,但 是 在 相关 的 上 下 文 都 无 法 找到 这 样 一 个 char 数组 。 

解决 方案 : 这 个 问题 ,怀疑 是 对 象 的 内 存 已 被 破坏 ,其 内 的 数据 已 不 再 是 对 象 本 身 。 
这 也 是 一 个 没有 解决 方案 的 问题 。 
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教训 : 这 类 问题 是 真正 的 难题 。 需 要 对 语言 和 系统 达到 精通 的 人 物 才 可 能 解 得 了 。 
5. 难 重 现 的 必 现 问题 


背景 : 一 个 Gallery 应 用 程序 能 够 以 网 格 形式 显示 很 多 张 图 片 。 当 图 片 较 多 时 ,就 会 
在 左边 出 现 滑 块 用 来 滚动 屏幕 。 正 常 来 讲 , 当 打 开 应 用 时 ,这 个 滑 块 应 处 在 最 上 面 的 
位 置 。 

问题 : 有 人 报告 说 初始 打开 应 用 时 , 滑 块 不 是 在 最 上 面 ,而 是 在 中 部 ,或 其 他 地 方 。 
而 且 声 称 这 是 必 现 的 问题 。 

分 析 : 但 当 调 试 的 时 候 却 怎么 也 无 法 重 现 这 个 问题 。 虽 然 这 并 不 是 一 个 严重 的 问 
题 ,但 感觉 这 样 的 行为 是 很 诡异 的 。 在 调试 的 过 程 中 发 现 , 测 试 人 员 的 应 用 与 我 这 边 应 用 
显示 图 片 的 顺序 似乎 有 些 不 同 ,是 正好 相反 的 顺序 。 这 是 有 一 个 可 配置 的 选项 在 控制 的 ， 
该 选项 设置 为 正 序 或 倒序 。 发 现 测试 人 员 当 时 用 的 倒序 ,而 通常 大 多 数 情况 下 ,用 的 都 是 
正 序 (可 能 是 因为 没有 人 去 设置 这 个 东西 , 它 默认 的 是 正 序 )。 这 可 能 是 问题 产生 的 原因 。 
果然 , 当 把 顺序 设置 为 倒序 的 时 候 , 滑 块 的 位 置 就 不 会 置顶 了 。 

解决 方案 : 找到 了 问题 的 重 现 规律 ,对 于 这 种 问题 就 好 办 了 。 发 现 , 当 设 置 为 倒序 的 
时 候 , 代 码 的 本 意 是 想 把 滑 块 放 在 最 后 ,但 是 计算 时 有 些 错误 , 误 把 一 个 屏幕 窗口 的 高 度 
当成 整个 文档 长 度 了 。 所 以 , 当 整 个 文档 长 度 超过 一 个 屏幕 时 , 滑 块 的 位 置 就 不 正确 了 。 
由 于 把 滑 块 放 在 最 上 端的 更 符合 一 般 情 况 , 所 以 就 无 论 倒序 顺序 ,把 滑 块 置顶 。 

教训 : 事实 上 ,很 少 问题 是 真正 的 小 概率 事件 (Seldom) ,只 有 当 涉及 多 个 线程 的 时 候 
才 会 有 真正 Seldom 的 问题 ,因为 无 法 确定 线程 的 执行 顺序 。 对 于 其 他 问题 ,应 该 是 都 还 
没有 找到 重 现 的 规律 。 相 信 了 这 一 个 事实 以 后 ,就 要 不 断 地 去 试验 和 假设 以 重 现 问题 。 
在 试验 的 时 候 , 也 要 注意 细节 ,因为 很 多 细节 都 可 能 是 一 条 重要 线索 。 最 重要 的 是 要 相信 
问题 是 存在 的 ,是 可 以 重 现 的 ,更 是 可 以 解决 的 。 

有 一 些 方法 技巧 可 以 用 来 重 现 看 似 比较 难 重 现 的 问题 : 

(1) 仔细 询问 或 查看 问题 出 现时 的 相关 操作 和 上 日志, 以 确定 是 否 漏 掉 了 一 些 必 要 的 
前 提 条 件 和 操作 。 

(2) 如 果 涉 及 与 其 他 应 用 或 模块 交互 , 则 要 了 解 每 个 应 用 和 模块 的 特性 ,然后 做 适当 
的 假设 ,再 去 做 试验 。 

(3) 猜测 可 能 导致 问题 的 原因 ,然后 去 创造 这 些 条 件 , 看 在 有 这 些 条 件 的 情况 下 ,是 
和 否 可 以 重 现 问题 。 比 如 ,如 果 猜 测 是 时 间 长 短 或 文件 大 小 导致 了 问题 ,那么 就 可 以 调 大 时 
间 , 用 大 文件 来 测试 。 如 果 猜 测 是 空 指针 的 问题 ,那么 就 可 以 故意 创造 出 一 个 空 指针 等 。 

(4) 要 相信 问题 是 存在 的 ,也 要 相信 问题 是 可 以 重 现 的 ,更 要 相信 这 个 问题 是 可 以 修 
复 的 。 

(5) 要 有 耐心 ,不 断 地 思考 ,假设 ,然后 去 验证 ,一 次 改变 一 个 条 件 ,一 点 一 点 地 分 析 
与 验证 ,最 终 是 能 够 重 现 并 修改 问题 的 。 


6. 真正 难 重 现 的 问题 一 一 线程 问题 
背景 : 一 个 手机 音乐 播放 器 支持 多 个 播放 列表 , 当 删 除 播放 列表 的 时 候 , 如 果 其 中 有 
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正在 播放 的 歌曲 ,那么 当 删 除 这 个 播放 列表 后 ,是 不 会 再 继续 播放 。 在 删除 过 程 中 ,如 果 
删除 到 正在 播放 的 歌曲 时 ,会 打开 并 播放 播放 列表 中 的 下 一 个 歌曲 ,直到 播放 列表 中 的 所 
有 歌曲 都 删除 完 。 删 除 歌 曲 的 动作 是 放 在 与 播放 不 同 的 线程 。 

问题 : 有 些 时候 , 删 除 含有 正在 播放 歌曲 的 播放 列表 后 ,当前 歌曲 跳 到 了 其 他 播放 列 
表 继 续 播放 。 

分 析 : 删除 过 程 中 会 涉及 很 多 个 过 程 ,停止 找到 下 一 首 、 播 放 和 删除 ,如 果 每 一 次 都 
这 么 走 的 话 ,是 不 可 能 出 现 这 个 问题 的 。 经 过 大 量 的 调试 与 跟踪 ,最 终 发 现 ,是 由 于 停止 
和 播放 没 能 一 次 执行 完 ,中 途 被 打 断 。 因 为 删除 是 在 另 一 个 线程 中 ,因此 有 可 能 当 正在 执 
行 停止 的 时 候 ,TaskScheduler 切换 了 线程 ,执行 了 播放 ,从 而 切换 到 了 另外 的 播放 列表 。 

解决 方案 : 找到 了 问题 的 原因 ,解决 起 来 就 很 容易 了 ,加 上 同步 锁 , 让 删除 .停止 和 播 
放 的 每 一 个 过 程 都 保证 不 被 中 断 ,就 解决 了 这 个 问题 。 

教训 : 这 是 一 个 真正 的 随机 出 现 的 问题 ,因为 它 是 由 于 线程 引起 的 。 多 线程 带 来 的 
第 一 个 问题 就 是 不 确定 性 ,另外 一 个 问题 就 是 同步 与 共享 的 问题 。 如 果 没 能 很 好 地 处 理 
同步 与 共享 ,那么 多 线程 会 带 来 更 多 的 问题 , 远 多 于 它们 所 解决 的 问题 。 

资料 来 源 : 2012-2-28 10:48,hitlion2008,51Testing 软件 测试 网 采编 ,有 删改 。 
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第 14 章 测试 团队 与 测试 环境 


在 软件 测试 的 具体 实践 中 ,人 是 决定 性 的 因素 ,可 以 说 ,建立 ,组 织 和 管理 一 支 优秀 的 
测试 团队 是 做 好 软件 测试 工作 的 基础 ;其 次 ,测试 的 执行 是 运行 在 特定 的 测试 环境 上 ,只 
有 建立 了 正确 的 测试 环境 ,才能 保证 测试 结果 的 正确 性 。 


14.1 组 建 测试 团队 


要 做 好 测试 团队 的 组 织 和 管理 工作 ,会 碰 到 下 列 一 系列 问题 
软件 测试 团队 的 任务 是 什么 ? 

测试 团队 在 开发 中 所 占 的 比重 有 多 大 ? 
测试 团队 由 哪些 角色 构成 ? 

每 个 角色 的 要 求 ,工作 范围 和 责任 有 什么 区 别 ? 

如 何 组 建 一 支 新 的 测试 团队 ? 怎样 确定 测试 团队 的 规模 ? 
优秀 软件 测试 工程 师 应 具备 什么 样 的 素质 ? 

怎样 发 掘 ,面试 和 聘用 优秀 的 测试 人 员 ? 

测试 人 员 的 职业 发 展 方向 在 哪里 ? 如 何 进行 培训 和 引导 ? 
通过 什么 能 够 产生 对 测试 人 员 的 激励 作用 ? 

怎样 根据 现 有 人 员 合理 安排 工作 ? 


14.1.1 测试 团队 的 地 位 和 责任 


软件 测试 团队 的 最 基本 任务 是 建立 测试 计划 、 设 计 测试 用 例 、 执 行 测试 .评估 测试 结 
果 和 递交 测试 报告 等 ,此 外 ,测试 团队 还 要 完成 的 其 他 一 些 任务 是 : 阅读 和 审查 软件 功能 
说 明 书 .设计 文档 ,审查 代码 ,与 开发 人 员 、 项 目 经 理 等 进行 充分 交流 等 。 

1) 软件 测试 团队 的 责任 

事实 上 , 单 靠 软件 测试 团队 是 不 能 保证 产品 质量 的 ,也 就 是 说 ,软件 产品 的 质量 不 是 
靠 测 出 来 的 ,而 是 靠 产品 开发 的 所 有 人 员 ( 需 求 分 析 人 员 、 系 统 设 计 人 员 、 程 序 员 、 测 试 人 
员 等 ) 共 同 努 力 来 获得 的 。 这 其 中 ,软件 测试 人 员 的 基本 责任 是 : 

(1) 尽早 并 努力 发 现 软件 程序 、 系 统 或 产品 中 所 有 的 问题 ; 

(2) 督促 开发 人 员 尽 快 地 解决 程序 中 的 缺陷 ,督促 代码 编写 具有 更 好 的 规范 性 、 易 读 
性 、 可 维护 性 等 ; 

(3) 帮助 项 目 管理 人 员 制 定 合 理 的 开发 计划 ,帮助 改善 开发 流程 、 提 高 产品 开发 
效率 ; 
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(4) 对 问题 进行 分 析 、 分 类 总 结 和 跟踪 ,以 便 让 项 目的 管理 者 和 相关 的 负责 人 能 够 对 
产品 当前 的 质量 情况 一 目 了 然 ; 

许多 软件 企业 将 软件 测试 团队 和 质量 保证 (QA) 团 队 合 在 一 起 ,或 称 测试 小 组 ,或 称 
QA 部 门 等 ,将 它们 的 责任 从 测试 团队 扩张 到 整个 质量 保证 领域 。 作 为 这 样 一 个 团队 , 具 
有 两 个 基本 职能 , 即 软件 测试 和 质量 保证 ,因此 ,就 拥有 更 多 的 责任 , 即 : 

(1) 在 产品 的 整个 生命 周期 ,与 项 目 中 的 相关 部 门 (市 场 、 设 计 、 开 发 .产品 配置 等 ) 合 
作 , 跟 踪 和 分 析 产 品 中 的 问题 ,站 在 用 户 的 角度 对 产品 进行 全 面 测试 ,对 不 足 之 处 提出 
质疑 。 

(2) 对 产品 开发 过 程 进行 跟踪 审查, 定义 并 推广 流程 ,及 时 纠正 流程 所 出 现 的 问题 ， 
不 断 改进 流程 。 

(3) 分 析 竞 争 对 手 的 产品 ,了 解 自己 产品 设计 的 不 足 ,提出 改进 的 意见 。 

把 软件 测试 和 质量 保证 两 项 职能 结合 起 来 做 ,工作 会 更 有 效 。 软 件 测试 为 质量 保证 
提供 数据 和 质量 评判 的 依据 ,质量 保证 可 以 指导 软件 测试 的 进行 ,将 缺陷 预防 和 事后 检查 
有 机 结合 起 来 ,质量 保证 和 软件 测试 相辅相成 ,达到 良好 的 效果 。 

2) 测试 团队 的 地 位 和 其 他 团队 的 关系 

在 不 同 的 公司 中 ,开发 团队 的 模式 存在 较 大 的 差别 。 通 过 了 解 开发 团队 的 构成 ,可 以 
基本 确定 测试 团队 具有 什么 地 位 。 

(1) 以 开发 为 核心 ,测试 人 员 是 开发 团队 的 一 部 分 ,没有 形成 独立 的 团队 ,如 图 14-1 
所 示 。 


开发 经 理 
| 


| 测试 人 员 开发 人 员 文档 人 员 | ”|[ 管理 人 员 
图 14-1 以 开发 经 理 为 核心 的 组 织 模型 


(2) 以 项 目 经 理 为 核心 ,开发 小 组 和 测试 小 组 并 存 , 隶 属于 项 目 经 理 领 导 , 如 图 14-2 
所 示 。 


| 
| 测试 组 长 开发 组 长 文档 人 员 | 
14-2 ”以 项 目 经 理 为 核心 的 组 织 模型 


(3) 项 目 经 理 、 开 发 经 理 和 测试 经 理 * 三 足 鼎 立 ”, 测 试 团队 具有 独立 的 ,权威 性 的 地 
位 ,如 图 14-3 所 示 。 


项 目 经 理 


测试 经 理 


开发 经 理 


图 14-3 项 目 经 理 、 测 试 经 理 和 开发 经 理 三 足 里 立 


303 


《软件 测试 技术 与 实践 》 


其 次 ,测试 小 组 管理 具有 3 个 方向 : 

(1) 向 内 管理 ,确定 测试 团队 和 测试 不 同 岗位 的 工作 职责 、 招 聘 团队 成 员 、 组 织 团 队 
的 结构 、 监 督 和 激励 员工 ; 

(2) 向 上 管理 ,总 结 测试 过 程 的 近况 ,向 上 级 提交 紧急 问题 以 引起 项 目 管理 团队 关 
注 , 设 定 预 期 目标 ,快速 而 谨慎 地 应 对 方向 性 变化 ,参加 公司 级 的 管理 会 议 , 介 绍 测试 团队 
的 业绩 和 计划 等 ; 

(3) 向 外 管理 ,报告 缺陷 并 及 时 和 其 他 团队 沟通 ,对 问题 报告 进行 分 类 、 分 析 测 试 结 
果 , 与 同 级 管理 人 员 讨论 测试 需求 和 服务 。 

3) 测试 团队 的 规模 

如 果 是 针对 某 个 项 目 建立 测试 小 组 ,规模 相对 比较 容易 确定 ,可 以 根据 测试 的 范围 来 
评估 测试 的 工作 量 , 然 后 就 知道 测试 小 组 的 人 数 。 对 于 长 期 存在 的 一 个 测试 部 门 ,其 规模 
的 确定 相对 比较 困难 ,要 考虑 研发 部 门 或 工程 部 门 的 预算 、 产 品 路 线 图 、 多 个 项 目 并 行 、 重 
盖 的 影响 ,项目 延迟 等 各 种 情况 。 一 般 在 考虑 各 种 因素 的 情况 下 ,还 要 加 上 10 铬 左右 的 
富裕 量 (Buffer) 。 

测试 团队 的 规模 还 可 以 从 另 一 个 角度 去 考虑 , 即 在 整个 软件 开发 部 门 所 占 的 比重 ,或 
相对 开发 人 员 ( 包 括 系 统 设计 ,程序 设计 和 编程 人 人员。 虽然 这 样 的 定义 并 不 科学 ,开发 人 
员 本 来 应 该 指 所 有 参加 系统 或 产品 开发 的 技术 人 员 ,也 就 是 包括 产品 需求 分 析 、 设 计 和 测 
试 人 员 ,但 目前 业界 普遍 认可 了 这 种 用 法 ) 所 占 的 比例 。 

从 经 验 看 ,不 同 的 应 用 ,软件 测试 人 员 和 软件 开发 人 员 的 比例 也 是 不 同 的 ,大 致 可 分 为 : 

(1) 操作 系统 类 产品 ,对 测试 要 求 最 高 ,测试 人 员 与 开发 人 员 为 2 : 1。 因 为 操作 系统 
功能 之 间 关 系 复杂 ,支持 各 类 硬件 和 各 种 应 用 程序 接口 ;同时 ,用 户 的 水 平 层次 千差万别 ， 
操作 灵活 ,对 操作 系统 有 更 大 的 挑战 ,而 操作 系统 要 求 自身 具有 高 可 靠 性 。 所 有 这 些 , 导 
致 其 测试 的 工作 量 非常 大 。 

(2) 应 用 平台 、 支 撑 系 统 类 产品 ,对 测试 要 求 比 较 高 ,不 仅 系统 本 身 要 运行 在 不 同 的 
操作 系统 平台 上 ,还 要 支持 不 同 的 应 用 接口 和 应 用 需求 ,其 比例 可 以 低 一 些 ,测试 人 员 与 
开发 人 员 的 比例 一 般 在 1 : 1 左右 。 

(3) 特定 应 用 类 产品 ,由 于 用 户 对 象 清楚 范围 小 .甚至 对 应 用 平台 或 应 用 环境 加 以 
限制 ,所 以 测试 人 员 可 以 再 减少 些 ,但 测试 人 员 与 开发 人 员 的 比例 一 般 在 1: 2 一 1:14。 

测试 人 员 与 开发 人 员 的 比例 还 取决 于 代码 的 质量 。 如 果 开 发 人 员 进 行 充分 的 单元 测 
试 和 集成 测试 , 交 给 测试 人 员 测 试 的 软件 包 具 有 很 高 的 质量 ,这 时 ,软件 测试 人 员 主 要 集 
中 在 端 到 端的 功能 性 测试 ,性 能 测试 .安全 性 测试 等 ,这 种 情况 下 ,测试 人 员 与 开发 人 员 的 
比例 可 以 比较 低 。 相 反 ,代码 质量 差 , 测 试 人 员 要 进行 大 量 的 功能 测试 ,报告 大 量 的 缺陷 ， 
还 不 得 不 进行 多 轮回 归 测 试 ,测试 人 员 的 数量 自然 要 大 得 多 。 


14.1.2 测试 团队 的 构成 


许多 软件 测试 活动 应 由 相对 独立 的 人 员 进 行 。 根 据 软件 项 目的 规模 等 级 和 完整 性 级 
别 以 及 测试 类 别 ,软件 测试 可 由 不 同 机 构 组 织 实施 。 测 试 团 队 的 构成 从 理论 上 说 ,和 其 规 
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模 没 有 多 大 关系 。 即 使 项 目 很 小 ,测试 小 组 就 一 个 人 ,那么 这 个 人 也 要 同时 扮演 不 同 的 角 
色 。 根据 GB/T15532 一 2008《 计 算 机 软件 测试 规范 》, 测 试 活动 中 人 员 的 配备 见 表 14-1。 


表 14-1 软件 测试 人 员 配 备 情况 


工作 角色 有 具体 职责 
测试 项 目 负 责 人 ete oleh 
测试 分 析 员 确定 测试 计划 测试 内 容 、 测 试 方法 、 测 试 数据 生成 方法 ,测试 ( 软 , 硬 件 ) 环 境 、 
测试 工具 评价 测试 工作 的 有 效 性 
测试 设计 员 设计 测试 用 例 确定 测试 用 例 的 优先 级 ,建立 测试 环境 
测试 程序 员 编写 测试 辅助 软件 
测试 员 执行 测试 、 记 录 测 试 结果 
测试 系统 管理 员 对 测试 环境 和 资产 进行 管理 和 维护 
配置 管理 员 设置 ,管理 和 维护 测试 配置 管理 数据 库 


注 1: 当 软 件 的 供 方 实施 测试 时 ,配置 管理 员 由 软件 开发 项 目的 配置 管理 员 承 担 ; 当 独立 的 测试 组 织 
实施 测试 时 ,应 配备 测试 活动 的 配置 管理 员 。 
注 2: 一 个 人 可 承担 多 个 角色 的 工作 一 个 角色 可 由 多 个 人 承担 。 


一 般 来 看 ,一 个 比较 健全 的 测试 部 门 应 该 具有 下 列 这 些 角色 : 

(1) 测试 经 理 : 人 员 招聘 培训、 管理 ,资源 调配 、 测 试 方法 改进 等 ; 

(2) 实验 室 管理 人 员 : 设置 .配置 和 维护 实验 室 的 测试 环境 ,主要 是 服务 器 和 网 络 环境 等 ; 

(3) 内 审 员 : 审查 流程 ,并 提出 改进 流程 的 建议 ;建立 测试 文档 所 需 的 各 种 模板 ,检查 软件 
缺陷 描述 及 其 他 测试 报告 的 质量 等 ; 

(4) 测试 组 长 : 负责 项 目的 管理 ,测试 计划 的 制定 、 项 目 文档 的 审查 、 测 试用 例 的 设 
计 和 审查 ,任务 的 安排 ,和 项 目 经 理 、 开 发 组 长 的 沟通 等 ; 

(5) 测试 设计 人 员 /资深 测试 工程 师 : 负责 产品 设计 规格 说 明 书 的 审查 、 测 试用 例 的 
设计 ,技术 难题 的 解决 ,新 人 和 一 般 测试 人 员 的 培训 和 指导 、 实 际 测试 任务 的 执行 ; 

(6) 一 般 ( 初 级 ) 测 试 工程 师 : 执行 测试 用 例 和 相关 的 测试 任务 。 

对 于 比较 大 规模 的 测试 团队 ,测试 工程 师 分 为 3 个 层次 : 初级 测试 工程 师 、 测 试 工程 
师资 深 (高 级 ) 测 试 工程 师 等 ,同时 还 设立 自动 化 测试 工程 师 、 系 统 测试 工程 师 和 架构 工 
程 师 (Architecture) 。 

规模 较 小 的 测试 小 组 可 设 测试 组 长 。 测 试 组 长 承担 测试 经 理 的 部 分 责任 ,如 参加 面 
试 工作 ,资源 管理 .团队 发 展 等 ,并 且 要 做 内 审 员 的 工作 ,检查 软件 缺陷 描述 及 其 他 测试 报 
告 的 质量 等 。 资 深 测 试 工程 师 不 仅 要 负责 设计 规格 说 明 书 的 审查 、 测 试用 例 的 设计 等 ,还 
要 设置 测试 环境 , 即 承担 实验 室 管理 人 员 的 责任 。 


14.1.3 测试 人 员 的 责任 


虽然 资深 测试 工程 师 和 (初级 ) 测 试 工程 师 责任 不 一 样 ,但 资深 测试 工程 师 能 承担 ( 初 
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级 ) 测 试 工程 师 所 有 的 责任 ,而 且 都 是 从 事 于 技术 工作 ,设计 测试 用 例 、 开 发 测试 脚本 和 执 
行 各 种 测试 任务 。 


1) 初级 测试 工程 师 
初级 测试 工程 师 的 责任 比较 简单 ,还 不 具备 完全 独立 的 工作 能 力 ,需要 测试 工程 师 或 


资深 测试 工程 师 的 指导 ,要 求 比较 低 , 主 要 有 下 列 7 项 责任 ; 


(1) 了 解 和 熟悉 产品 的 功能 ,特性 等 ; 

(2) 验证 产品 在 功能 .界面 上 是 否 和 产品 规格 说 明 书 一 致 ; 

(3) 按照 要 求 ,执行 测试 用 例 ,进行 功能 测试 ,验收 测试 等 ,并 能 发 现 所 暴露 的 问题 ; 
(4) 清楚 地 描述 所 发 现 的 缺陷 ; 

(5) 使 用 简单 的 测试 工具 ; 

(6) 努力 学 习 新 技术 和 软件 工程 方法 ,不断 提高 自己 的 专业 水 平 ; 

(7) 接受 测试 工程 师 的 指导 ,执行 主管 所 交代 的 其 他 工作 。 

2) 测试 工程 师 

测试 工程 师 的 责任 包括 熟悉 测试 流程 测试 方法 和 技术 ,参与 自动 化 测试 ,具有 独立 


的 工作 能 力 ,但 基本 以 执行 测试 为 主 ,主要 责任 如 下 : 


(1) 熟悉 产品 的 功能 ,特性 ,审查 产品 规格 说 明 书 ; 

(2) 验证 产品 是 否 满足 了 规格 说 明 书 所 描述 的 需求 ; 

(3) 根据 需求 文档 或 设计 文档 ,可 以 设计 功能 方面 的 测试 用 例 ; 
(4) 根据 测试 用 例 ,执行 各 种 测试 ,发 现 所 暴露 的 问题 ; 

(5) 全 面 使 用 测试 工具 ,包括 开发 测试 脚本 ; 

(6) 安装 ,设置 简单 的 测试 环境 ，; 

(7) 报告 所 发 现 的 软件 缺陷 ,审查 和 跟踪 软件 缺陷 ,直到 缺陷 关闭 ; 
(8) 编制 测试 报告 ; 

(9) 负责 对 初级 测试 工程 师 的 指导 ,执行 主管 所 交代 的 其 他 工作 。 
3) 资深 测试 工程 师 

资深 测试 工程 师 不 仅 具 有 良好 的 技术 、 产 品 分 析 能 力 、 解 决 问题 能 力 、 丰 富 的 测试 工 


作 经 验 , 而 且 有 较 好 的 编程 .自动 化 测试 经 验 ,熟悉 测试 流程 .测试 方法 和 技术 ,解决 QA 
工作 中 可 能 遇 到 的 各 种 技术 问题 。 主 要 责任 如 下 : 


(1) 负责 系统 一 个 或 多 个 模块 的 测试 工作 ; 

(2) 制定 某 个 模块 或 某 个 阶段 的 测试 计划 ,测试 策略 ; 

(3) 设计 自动 化 测试 框架 或 结构 ,开发 测试 脚本 、 必 要 的 测试 工具 ; 

(4) 设计 测试 环境 所 需 的 系统 或 网 络 结构 ,安装 、 设 置 复杂 的 系统 测试 环境 ; 

(5) 熟悉 产品 的 功能 、 特 性 ,审查 产品 规格 说 明 书 ,并 提出 改进 意见 ; 

(6) 审查 系统 ,程序 设计 说 明 书 ; 提 出 对 系统 模块 设计 的 改进 要 求 ; 

(7) 审查 代码 ; 

(8) 验证 产品 是 否 满足 了 规格 说 明 书 所 描述 的 需求 ; 

(9) 根据 需求 文档 或 设计 文档 ,设计 复杂 的 测试 用 例 , 包 括 性 能 测试 .故障 转移 测试 、 


安全 性 测试 等 方面 的 测试 用 例 ; 
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(10) 负责 执行 性 能 测试 .故障 转移 测试 .安全 性 测试 等 ; 

(11) 负责 对 测试 工程 师 的 指导 ,执行 主管 所 交代 的 其 他 工作 。 

4) 测试 实验 室 管 理 员 

测试 实验 室 管理 员 主 要 负责 建立 ` 设 置 和 维护 测试 环境 ,保证 测试 环境 的 稳定 运行 。 
其 主要 责任 如 下 : 

(1) 负责 测试 环境 所 需 的 网 络 规划 和 建设 ,维护 网 络 的 正常 运行 

(2) 建立 .设置 和 维护 测试 环境 所 需 的 应 用 服务 器 或 软件 平台 ; 

(3) 对 实验 室 的 硬件 .软件 资源 进行 登记 、 分 配 和 管理 ; 

(4) 申请 所 需求 的 、 新 的 硬件 资源 软件 资 源 ;协助 有 关 部 门 进行 采购 、 验 收 ; 

(5) 对 使 用 实验 室 的 硬件 ,软件 资源 的 权限 进行 设计 和 设置 ,保证 其 安全 性 ; 

(6) 安装 新 的 测试 平台 ,被 测试 的 系统 等 ; 

(7) 优化 测试 环境 ,提高 测试 环境 中 网 络 、 服 务 器 和 其 他 设备 运行 的 性 能 。 

5) 软件 包 构 建 或 发 布 工程 师 (Release Engineer) 

产品 发 布 工程 师 在 QA 工作 中 或 在 整个 研发 部 门 起 着 重要 的 作用 ,负责 测试 产品 的 
上 载 .打包 和 发 布 ,其 主要 责任 是 : 

(1) 负责 源 程序 代码 管理 系统 (如 CVS、SourceSafe 等 ) 的 建立 ,管理 和 维护 ; 

(2) 制定 Check in/Check out 等 相关 的 源 代码 控制 规则 ; 

(3) 文件 名 定义 规范 ,建立 合理 的 程序 文件 结构 和 存储 目录 结构 ; 

(4) 为 程序 的 编译 、 连 接 等 软件 包 构 造 工 作 , 建 立 自动 处 理 文件 ; 

(5) 检查 被 测试 的 软件 包 及 其 文件 版 本 是 否 正 确 、 有 效 ; 

(6) 负责 日 常 的 软件 包 构 建 , 且 确 保 软件 包 不 含 病 毒 、 不 缺少 任何 文件 等 ; 

(7) 软件 包 的 接收 发送、 存储 和 备份 等 。 

6) 测试 组 长 

测试 组 长 一 般 具 备 资深 测试 工程 师 的 能 力 和 经 验 ,其 综合 能 力 和 技术 应 该 在 小 组 内 
是 最 强 的 。 测 试 组 长 的 责任 偏重 测试 项 目的 计划 .跟踪 和 管理 ,同时 负责 测试 小 组 的 团队 
管理 和 发 展 。 其 主要 责任 如 下 : 

(1) 负责 一 个 独立 的 测试 项 目 ,制定 整个 项 目的 测试 计划 ,测试 策略 ,包括 风险 评估 、 
日 程 表 安排 等 ; 

(2) 测试 小 组 的 管理 或 参与 测试 团队 的 管理 ,负责 测试 项 目 内 部 的 资源 和 任务 安排 ; 

(3) 熟悉 产品 的 功能 .特性 ,审查 产品 需求 定义 和 功能 规格 说 明 书 ,并 提出 改进 意见 ; 

(4) 实施 软件 测试 ,验证 产品 是 否 满足 了 规格 说 明 书 所 描述 的 需求 ;并 对 软件 问题 进 
行 跟踪 分 析 和 报告 ,推动 测试 中 发 现 问题 及 时 合理 地 解决 

(5) 编写 项 目的 整体 测试 报告 ,保证 产品 质量 ; 

(6) 对 竞争 者 的 产品 进行 分 析 , 提 出 对 软件 的 进一步 改进 的 要 求 并 且 评 估 改 进 方案 
是 否 合理 ; 

(7) 监督 测试 流程 的 执行 ,并 将 执行 过 程 中 所 发 现 的 问题 反馈 给 测试 经 理 或 项 目 
经 理 ; 

(8) 为 团队 成 员 提 供 技术 指导 ,协助 测试 经 理工 作 。 
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7) 测试 经 理 

测试 经 理 ( 或 QA 经 理 ) 的 主要 工作 是 管理 团队 ,资源 和 项 目 等 各 个 方面 。 测 试 经 理 
对 产品 的 质量 负 全 面 责任 ,负责 向 公司 高 层 反映 软件 开发 过 程 中 的 管理 问题 或 产品 中 的 
质量 问题 ,使 公司 能 全 面 掌握 生产 和 质量 状况 。 其 主要 责任 如 下 : 

(1) 负责 整个 测试 团队 或 部 门 的 管理 ,包括 测试 岗位 的 定义 、 组 织 团队 结构 的 建立 和 
优化 、 团 队 的 建设 和 发 展 . 培 训 活动 的 组 织 ` 员 工 的 激励 等 ; 

(2) 负责 一 个 完整 产品 的 软件 测试 和 质量 保证 等 工作 ,包括 项 目 组 长 的 指定 、 项 目的 
资源 的 安排 ,项目 进 度 的 跟踪 、 项 目 审查 和 总 结 等 ; 

(3) 测试 部 门 年 度 /季度 计划 、 预 算 的 编写 .实施 和 评估 ; 

(4) 促进 质量 文化 的 普及 ,促进 开发 团队 的 每 位 成 员 建立 正确 的 质量 观 ; 

(5) 协助 人 力 资源 部 门 做 好 测试 人 员 的 招聘 、 考 核 等 方面 的 工作 ; 

(6) 定义 、 实 施 软 件 测试 流程 或 整个 开发 周期 流程 ,并 收集 、 处 理 流程 实施 中 所 存在 
问题 ,最 终 不 断 改 进 流程 ; 

(7) 审查 项 目的 测试 计划 ,测试 策略 等 ,包括 资源 调度 和 平衡 .风险 评估 等 ; 

(8) 和 其 他 部 门 协调 ,参加 多 方 会 议 审查 产品 需求 定义 和 功能 规格 说 明 书 ,解决 其 中 
的 问题 ; 

(9) 指导 测试 项 目 组 实施 软件 测试 ,并 对 软件 问题 进行 跟踪 分 析 和 报告 ,推动 测试 中 
发 现 问题 及 时 合理 地 解决 ; 

(10) 审查 项 目的 测试 报告 ,组织 产品 质量 的 分 析 ,提交 质量 分 析 报告 ; 

(11) 对 竞争 者 的 产品 进行 深度 分 析 ,提出 改进 软件 产品 的 建议 或 评估 改进 方案 是 否 
合理 等 。 


测试 工程 师 的 一 天 


这 里 以 测试 工程 师 一 天 的 工作 为 例 , 说 明 测试 工程 师 的 责任 和 任务 。 

(1) 产品 构建 完成 之 后 ,每 日 凌晨 ,测试 编译 自动 开始 ; 

(2) 如 果 测 试 编译 成 功 ,BVT(Basic Verification Test, 基 本 验证 测试 ) 自动 开始 ; 

(3) 测试 工程 师 早晨 来 上 班 , 第 一 件 事 就 是 检查 测试 包 (Test Build) 与 BVT 结果 的 
E-mail; 

(4) 如 果 有 BVT 错误 ,在 第 一 时 间 里 分 析 原 因 , 隔 离 错误 代码 并 报告 最 高 级 别 的 缺 
陷 (Priority 0 Bug, 开 发 团队 应 于 当日 之 内 修正 这 类 Bug); 

(5) 测试 工程 师 接 着 在 缺陷 管理 系统 中 检查 Bug 情况 ,验证 分 配给 自己 的 、 开 发 人 员 
已 修改 的 Bug; 

(6) 关闭 Bug ,并 针对 该 Bug 修正 所 影响 范围 ,执行 回归 测试 ; 

(7) 验证 最 近 开发 的 测试 脚本 执行 的 结果 。 如 果 其 中 有 新 的 错误 ,报告 Bug 并 进行 
调试 ,解决 脚本 中 的 问题 ; 

(8) 开发 新 的 测试 规范 或 新 的 测试 脚本 ; 

(9) 使 用 个 人 所 建 的 任务 ,验证 自己 新 开发 的 测试 脚本 ; 

(10) 用 已 通过 的 脚本 来 验证 所 对 应 开发 人 员 的 、 新 版 本 的 程序 ,尽量 发 现任 何 严 可 
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的 问题 ; 
(11) 改进 与 提高 自动 化 测试 系统 的 功能 ; 
(12) 参与 产品 规格 说 明 书 ,测试 用 例 的 评审 会 议 ; 
(13) 复审 测试 同伴 写 的 脚本 和 相关 文档 ; 
(14) 回答 项 目 相关 的 其 他 各 种 问题 。 


14.1.4 测试 团队 的 组 织 模型 


测试 团队 的 组 织 直 接 关 系 到 测试 团队 的 工作 效率 和 生产 力 , 其 组 织 的 方式 由 测试 团 
队 规 模 和 具体 任务 .技术 等 决定 。 小 的 测试 团队 一 般 以 项 目 来 组 织 , 对 于 大 型 测试 团队 的 
组 织 ,一 层 结构 难以 满足 管理 的 要 求 ,有 必要 构造 2 一 3 层 的 组 织 结构 ,对 于 这 种 多 层 结 
构 , 可 以 归纳 为 两 种 基本 类 型 : 

1) 从 测试 所 采用 的 技术 角度 来 组 织 

将 测试 团队 按 所 涉及 的 计算 机 技术 来 划分 ,形成 多 个 技术 部 门 。 当 启动 一 个 项 目 时 ， 
将 其 分 解 为 不 同 技术 的 模块 ,从 不 同 的 技术 部 门 抽 调 人 员 ,组 成 动态 的 项 目 组 ,如 图 14-4 
所 示 。 这 种 结构 的 优势 是 技术 共享 性 比较 好 ,有 利于 推动 技术 的 发 展 ,适合 于 那些 技术 
深 、 产 品 单一 的 软件 公司 。 但 是 ,这 种 类 型 的 组 织 结构 ,对 项 目 管理 有 更 大 的 挑战 ,项 目 团 
队 的 凝聚 力 要 差 些 ,因为 项 目 成 员 来 自 不 同 的 部 门 。 


测试 团队 


多 媒体 组 | | Web 技 术 组 | | Java 技 术 组 Windows 技 术 组 | 网 络 通信 组 


图 14-4 按 技术 领域 来 组 建 团队 的 模型 示意 图 


2) 按 产品 线 来 组 织 

将 测试 团队 按照 公司 的 不 同 产品 线 进 行 划分 。 任 何 一 个 产品 的 开发 工作 ,都 是 在 某 
个 特定 产品 团队 内 进行 的 ,而 一 个 产品 往往 包含 了 多 个 项 目 , 项 目 组 在 产品 团队 内 建立 ， 
不 跨越 多 个 部 门 , 如 图 14-5 所 示 。 这 种 结构 的 优势 是 有 利于 产品 各 个 模块 的 协调 、 集 成 ， 
接口 测试 会 比较 充分 ,产品 功能 特性 理解 比较 深 , 且 有 利于 项 目 管理 ,项 目 团队 的 凝聚 力 
强 , 但 不 利于 技术 的 交流 和 经 验 共享 。 对 于 那些 产品 比较 多 .公司 规模 比较 大 的 软件 测试 
团队 比较 合适 。 

组 建 一 支 新 的 测试 团队 主要 包括 以 下 5 个 方面 的 工作 : 

(1) 对 测试 人 员 的 要 求 ; 

(2) 测试 人 员 的 招聘 ; 

(3) 测试 人 员 的 培训 ; 
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测试 团队 
I 

产品 A 组 [产品 产品 F 组 

T T T T 下 
| | 
| | | 2 开导 3 

项 目 二 [ea— 项 目 二 

图 14-5 ” 按 产品 线 来 组 建 团 队 的 模型 示意 图 
(4) 组 建 测试 团队 ; 


(5) 测试 流程 的 建立 和 完善 。 

测试 经 理应 拥有 正确 的 理念 ,清楚 对 测试 人 员 的 具体 要 求 , 而 这 对 测试 人 员 招 聘 和 激 
励 、 测 试 工作 的 效率 和 质量 、 测 试 结果 的 稳定 性 等 都 会 有 积极 的 影响 。 

通常 要 为 新 到 的 测试 人 员 分 配 一 个 资深 测试 工程 师 作 为 其 导师 ,指导 新 人 的 日 常 工 
作 , 了 解 新 员工 的 进度 和 学 习 的 难点 ,检查 新 人 的 工作 (包括 测试 结果 )、 回 答 工 作 中 遇 到 
的 各 种 问题 等 。 这 种 体制 能 够 保证 统一 的 测试 质量 水 平 ,也 是 向 每 个 员工 表明 : 任何 一 
位 成 员 的 成 功 对 整个 小 组 的 成 功 都 会 发 挥 重 要 的 作用 。 

经 过 入 职 培训 ,新 员工 必须 达到 上 岗 的 基本 要 求 ,如 了 解 被 测试 的 产品 ,掌握 测试 的 
基本 知识 ,熟悉 软件 开发 流程 及 相应 规则 等 。 表 14-2 作为 一 个 简单 示例 ,说 明 测试 工程 
师 一 般 要 考核 的 项 目 。 


表 14-2 ”测试 工程 师 考核 的 项 目 


考核 项 目 优秀 (5) 良好 (4) 通过 (3) 不 通过 (1) 整 (一 1) 
公司 产品 >90 >75 >60 <60 <40 
测试 知识 >90 >75 >60 一 60 <40 
质量 管理 知识 >90 >75 >60 <60 <40 
测试 技术 优秀 良好 正常 不 够 好 差 
测试 用 例 设计 90% 80% 70% <70% <50% 

i 举一反三 ， 加 1 一 2 个 明显 问 | 多 个 明显 问题 

测试 用 例 执 行 覆盖 边界 严格 执行 “| 符合 要 求 题 没 被 发 现 没 被 发 现 
发 现 Bug 的 能 力 | 95% 90% 80% <80% <60% 
Bug 描述 没 问题 , 清 想 。 | 没 问题 。 | 只 有 小 问题 “| 芒 们 全 请 区" 全 | 不 会 措 进 
问题 分 析 积极 做 ,有 效果 | 有 效果 去 做 做 得 少 不 做 
报告 高 质量 ,及 时 高 质量 ,80%| 正常 ,80% 质量 不 够 好 没 做 
流程 控制 严格 遵守 遵守 基本 遵守 忽略 某 些 地 方 没 遵守 
工作 态度 热情 积极 正常 消极 恶劣 
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14.2 管理 测试 团队 


为 了 使 测试 团队 有 一 个 良好 的 发 展 , 不 仅 要 在 内 部 树立 起 良好 的 团队 意识 ,将 团队 管 
理 的 普遍 方法 应 用 到 管理 工作 之 中 ,而 且 应 针对 软件 测试 团队 的 特点 ,采取 一 些 相 应 的 策 
略 ,包括 不 同 的 激励 方法 、 做 好 知识 共享 和 在 岗 培 训 等 。 
通过 合理 设置 和 优化 组 织 结构 .引入 个 人 /团队 过 程 模型 .明确 岗位 责任 .绩效 和 目标 
考核 .开展 团队 活动 等 ,全 面 加强 测 试 团队 的 建设 。 
由 于 软件 测试 工作 需要 每 个 成 员 都 有 高 度 的 责任 感 、 全 身心 投入 ,所 以 必须 通过 良好 
的 管理 方法 和 一 系列 激励 措施 ,在 测试 小 组 中 保持 高 昂 的 士气 和 动力 ,使 测试 小 组 的 成 员 
相信 ,测试 部 门 经 理 和 更 上 层 的 经 理 非常 重视 测试 团队 ,支持 团队 的 工作 。 
通常 由 于 不 切实 际 的 进度 安排 ,或 软件 开发 前 期 工作 没 做 好 ,往往 导致 测试 所 需要 的 
时 间 被 严重 挤 压 ,从 而 造成 测试 人 员 加 班 加 点 。 因 此 有 必要 帮助 测试 人 员 建 立 有 效 的 、 合 
理 的 工作 方式 ,缓解 进度 所 带 来 的 压力 。 在 软件 测试 中 ,常用 的 方法 有 : 
。 白天 创建 、 编 辑 测试 脚本 ,在 下 班 前 启动 自动 测试 脚本 ,让 系统 晚上 自动 执行 测 
试 ,第 二 天 早上 拿 到 测试 执行 的 结果 。 
。 调节 个 人 休息 时 间 表 ,保证 测试 每 周 7 天 都 能 执行 测试 ,充分 利用 测试 机 器 和 其 
他 资源 。 
。 将 测试 工作 进行 分 解 、 细 化 ,一 部 分 人 (2 一 3 人 比较 好 ,测试 项 目 组 长 必须 参加 ) 
可 以 先进 入 某 个 测试 项 目 ,设计 测试 计划 ,测试 用 例 、 建 立 环境 等 。 
。 项 目 计划 或 产品 功能 的 变化 ,对 测试 影响 要 比 开 发 大 ,事先 要 对 这 些 风 险 进 行 充 
分 估计 。 在 估计 测试 时 间 时 ,要 留 有 余地 。 
提供 正式 和 非 正 式 的 培训 机 会 ,以 满足 测试 人 员 不 断 提高 技能 的 需要 。 非 正式 的 培 
训 主 要 是 通过 测试 团队 内 部 的 活动 ,达到 知识 共享 ,例如 : 
。 组 内 技术 交流 和 讨论 会 ,例如 一 周 或 一 月 一 个 专题 ,展开 讨论 ; 
。 让 经 验 丰 富 或 技术 好 的 小 组 成 员 举 办 讲座 ,分 享 经 验 和 最 佳 实践 ; 
。 建立 测试 部 门 的 小 图 书 室 或 图 书 俱 乐 部 ,测试 小 组 一 起 阅读 测试 方面 或 开发 技术 
方面 的 书籍 ,然后 在 中 午 就 餐 时 间或 其 他 时 间 进 行 讨 论 交 流 。 
正式 培训 机 会 是 指 参 加 外 部 的 专业 培训 班 、 正 式 的 测试 技术 研讨 会 .专家 提供 的 培训 
课程 等 ,也 包括 将 专家 请 到 公司 内 部 所 做 的 培训 或 辅导 。 
IEEE CSDP(Certified Software Development Professional, 认 证 的 软件 开发 专业 人 
员 ) 描 述 了 一 个 资深 测试 工程 师 所 要 培训 的 内 容 , 如 下 所 示 : 
(1) 商业 活动 和 工程 经 济 , 包 括 工程 经 济 、 规 范 、 专 业 实践 和 标准 ; 
(2) 软件 需求 ,包括 需求 工程 过 程 、 需 求 引出 、 需 求 分 析 、 软 件 需 求 说 明 书 、 需 求 确认 、 
需求 管理 ; 
(3) 软件 设计 ,包括 软件 设计 理念 .软件 体系 结构 ,软件 设计 质量 分 析 和 评估 、 软 件 设 
计 标 记 和 文档 、 软 件 设 计策 略 和 方法 、 软 件 设计 中 的 人 的 因素 ,软件 和 系统 安全 ; 
(4) 软件 实施 ,包括 计划 实施 、 代 码 设计 ` 数 据 设 计 和 管理 .错误 处 理 、 源 代码 组 织 、 代 
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码 文档 、QA 实施 、 系 统 集成 和 配置 .调整 代码 、 实 施工 具 ; 

(5) 软件 测试 ,包括 测试 类 型 .测试 水 平 、 测 试 策略 测试 设计 、 代 码 测试 覆盖 说明书 
测试 覆盖 .测试 执行 、 测 试 文档 测试 管理 ; 

(6) 软件 维护 ,包括 软件 可 维护 性 .软件 维护 过 程 、. 软 件 维护 度量 .软件 维护 计划 、 软 
件 维护 管理 ,软件 维护 文档 ; 

(7) 软件 结构 管理 ,包括 SCM 过 程 管 理 、 软 件 配 置 确认 、 软 件 配 置 控制 .软件 配置 状 
态 计算 软件 配置 审核 .软件 发 布 管理 和 递交 ; 

(8) 软件 工程 管理 ,包括 度量 、 组 织 管理 和 协调 ,初始 化 和 范围 定义 、 计 划 、 软 件 获取 、 
设 定 、 风 险 管理 ,复审 和 评价 .工程 结束 ,后 期 终止 活动 ; 

(9) 软件 工程 过 程 ,包括 过 程 基 础 构造 ,过 程度 量 、 过 程 定义 、 定 性 的 过 程 分 析 、 过 程 
执行 和 变更 ; 

(10) 软件 工程 工具 和 方法 ,包括 管理 工具 和 方法 、 开 发 工具 和 方法 、 维 护 工 具 和 方 
法 、 支 持 工 具 和 方法 ; 

(11) 软件 质量 ,包括 软件 质量 理念 ,计划 SQA 和 V&V、SQA 和 V&V 的 方法 应 用 
到 SQA 和 V&V 上 的 度量 法 。 


14.3 ”部署 测试 环境 


测试 执行 是 在 一 定 的 环境 下 进行 的 ,环境 的 设置 直接 影响 了 测试 结果 。 所 以 ,在 测试 
计划 阶段 ,就 要 开始 考虑 和 设计 测试 环境 ,准备 测试 环境 所 需要 的 资源 。 


14.3.1 测试 环境 的 定义 


软件 测试 环境 包括 设计 环境 实施 环境 和 管理 环境 : 

(1) 设计 环境 : 编制 测试 计划 、 说 明 、 报 告 及 与 测试 有 关 的 文件 所 基于 的 软 、 硬 件 设 
备 和 支持 。 在 软件 设计 阶段 ,不 仅 要 设计 测试 用 例 ,绘制 系统 工作 流程 图 .数据 流程 图 等 ， 
需要 一 些 设 计 工 具 支 持 , 而 且 还 有 开发 测试 工具 或 测试 脚本 ,需要 集成 开发 环境 (IDE) 的 
支持 ,以 及 对 技术 讨论 ,沟通 等 必要 的 支持 手段 ,如 即时 消息 (IM) .邮件 、 在 线 会 议 系 
统 等 。 

(2) 实施 环境 : 对 软件 系统 进行 各 项 测试 所 基于 的 软 、 硬 件 设备 和 支持 。 测 试 实施 
环境 包括 被 测 软 件 的 运行 平台 和 用 于 各 项 测试 的 工具 。 实 施 环 境 必须 尽 可 能 地 模拟 真实 
环境 ,以 期 望 能 够 测试 出 真实 环境 中 的 所 有 问题 ,同时 该 环境 是 独立 的 ,不 受 开 发 人 员 调 
试 工作 的 影响 。 通 常 意义 上 所 讨论 的 测试 环境 ,主要 就 是 指 软件 测试 的 实施 环境 。 

(3) 管理 环境 : 管理 测试 资源 所 基于 的 软 、 硬 件 设备 和 支持 。 测 试 资源 指 测试 活动 
所 利用 或 产生 的 有 形 物质 (如 软件 .硬件 文档 ) 或 无 形 财富 (如 和 人力、 时 间 、 测 试 操作 等 )。 
广义 的 测试 管理 环境 包含 测试 设计 环境 、 测 试 实施 环境 和 专门 的 测试 管理 工具 。 例 如 ,对 
Bug 的 跟踪 、 分 析 管 理 ;对 Test case 的 分 类 管理 ;对 测试 任务 的 分 派 资源 管理 等 。 

测试 环境 贯穿 了 测试 的 各 个 阶段 ,每 个 阶段 中 测试 环境 对 测试 的 影响 是 不 一 样 的 。 
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在 测试 的 计划 阶段 ,充分 理解 客户 需求 ,掌握 产品 的 基本 特性 有 助 于 测试 环境 的 设计 , 合 
理 调度 使 用 各 种 资源 ,申请 新 的 测试 资源 ,保证 计划 的 顺利 实施 。 如 果 在 测试 计划 中 规划 
了 一 个 不 正确 的 环境 ,直到 实施 的 过 程 中 才 发 现 ,将 浪费 大 量 的 人 力 和 物力 取得 一 些 无 用 
的 结果 。 即 使 只 是 遗漏 了 一 些 环境 配置 (如 在 一 个 基于 手机 开发 的 项 目 中 遗漏 了 手机 的 
上 网 费用 ) ,不 能 及 时 发 现 . 申 请 购买 或 调用 ,也 会 影响 整个 项 目的 进度 。 

在 单元 测试 和 集成 测试 阶段 ,大 部 分 测试 工作 是 由 开发 人 员 完 成 的 。 开 发 人 员 的 测 
试 环境 通常 为 开发 环境 ,有 利于 代码 的 调试 和 分 析 , 但 开发 环境 和 产品 实际 运行 环境 的 差 
异 比较 大 ,测试 结果 可 能 不 够 可 靠 。 有 这 样 一 个 例子 ,测试 人 员 报 告 的 Bug 在 开发 环境 
中 无 法 重 现 ,开发 人 员 就 在 测试 人 员 的 测试 环境 中 研究 ,原来 是 环境 系统 的 设置 不 同 造成 
的 ,测试 人 员 就 应 该 分 析 修 改 系统 设置 是 否 合理 。 如 果 要 求 用 户 手 工 修改 系统 设置 ,或 不 
能 识别 用 户 的 系统 设置 ,通常 可 以 确定 是 缺陷 。 

在 系统 测试 和 验收 测试 阶段 ,测试 环境 必须 最 大 限度 地 接近 实际 环境 。 测 试 人 员 在 
设计 测试 用 例 时 就 得 写 明 测试 环境 ,因为 在 不 同 的 环境 中 预期 的 结果 是 不 同 的 。 测 试 中 
运行 测试 用 例 、 报 告 Bug 时 有 一 项 基本 要 求 就 是 写 明 测试 环境 ,以 便 开 发 人 员 再 现 Bug， 
减少 不 必要 的 交流 和 讨论 。 大 型 的 软件 系统 ,特别 是 支持 多 平台 的 软件 系统 ,往往 测试 环 
境 比 较 复 杂 ,而 且 在 不 同 的 环境 下 ,软件 的 特性 有 差异 ,问题 的 解决 方案 也 不 同 。 测 试 环 
境 问题 的 重要 性 应 该 得 到 充分 的 重视 ,尽量 将 测试 环境 的 因素 降 到 最 小 ,避免 因 测试 环境 
出 现 的 问题 。 


14.3.2 测试 环境 要 素 


测试 环境 包括 硬件 环境 和 软件 环境 ,硬件 环境 指 测试 必需 的 服务 器 、 客 户 端 、 网 络 连 
接 设备 ,以 及 打印 机 扫描 仪 等 辅助 硬件 设备 所 构成 的 环境 ;软件 环境 指 被 测 软件 运行 时 
的 操作 系统 、 数 据 库 及 其 他 应 用 软件 构成 的 环境 。 细 分 测试 环境 的 5 个 要 素 是 : 软件 、 硬 
件 、 网 络 环境 数据 准备 ,测试 工具 。 测 试 工具 (包括 自动 化 测试 框架 ) 是 测试 环境 的 重要 
组 成 部 分 ,一 般 还 需要 监控 诊断 的 实用 工具 ,如 监控 系统 性 能 、 网 络 流量 的 工具 ,跟踪 记录 
出 错 信息 .备份 关键 数据 的 工具 等 。 

在 讨论 测试 环境 时 ,还 要 考虑 测试 环境 的 社会 因素 和 产品 特性 的 影响 。 例 如 ,社会 因 
素 中 要 考虑 相关 的 国家 标准 ,甚至 相关 的 法 律 条 款 等 ,而 从 产品 特性 的 影响 来 看 ,包括 产 
品 的 主要 用 途 、 用 户 特征 、 运 行 时 间 长 短 、 负 和 载 强度 等 。 

1) 硬件 

软件 测试 中 基本 的 硬件 包括 特定 的 网 络 设备 、 服 务 器 、 测 试用 机 。 为 了 满足 密集 部 署 
服务 器 的 需要 ,开始 普遍 使 用 机 架 式 服务 器 (Rack Server) 和 刀片 式 服务 器 (Blade 
Server) , 极 大 改善 了 服务 器 管理 性 能 ,使 运作 参数 最 优化 ,能 够 减少 环境 设置 、 复 杂 线 缆 、 
动力 和 散热 等 方面 的 开支 ,并 节省 机 房 空 间 , 有 利于 日 常 的 维护 及 管理 。 

测试 用 机 一 般 为 终端 设备 ,也 可 以 用 服务 器 来 做 测试 机 ,特别 是 在 性 能 测试 时 ,一 台 
服务 器 模拟 的 虚拟 用 户 要 远 远 超过 一 般 的 PC 台式 机 。 

测试 音频 、 视 频 等 多 媒体 产品 除了 需要 配备 摄像 头 、 麦 克 风 、 音 箱 等 之 外 ,还 要 选择 不 
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同类 型 的 声卡 、 显 示 卡 等 。 声 卡 、 显 示 卡 还 受 其 驱动 程序 的 控制 ,在 选择 驱动 程序 时 ,要 考 
虑 操作 系统 、 型 号 等 因素 。 

除了 主机 声卡、 显示 卡 等 硬件 之 外 ,测试 中 常用 的 硬件 设备 还 包括 智能 手机 、 网 络 设 
备 、 输 入 设备 ,输出 设备 和 各 种 接口 。 

硬件 设备 多 种 多 样 , 完 全 根据 产品 的 需求 进行 选择 。 但 选择 时 需要 考虑 其 配置 标准 。 
通常 一 个 较 完善 的 测试 环境 均 包 括 标准 配置 .最 佳 配置 和 最 低 配置 等 几 种 情况 ,只 是 根据 
项 目的 需求 和 条 件 的 限制 所 占 的 比例 不 同 。 如 压力 测试 ,性 能 测试 .容量 测试 应 该 在 标准 
配置 及 最 佳 配置 的 设备 上 运行 ,而 功能 性 测试 .用户 界 面 测试 等 完全 可 以 在 低 配 置 的 机 器 
上 运行 。 

2) 网 络 环境 

网 络 环境 是 由 相关 的 网 络 设备 .网络 系统 软件 及 其 配置 构成 的 综合 环境 ,包括 : 

。 路 由 器 、 交 换 机 、 网 线 、 网 卡 等 硬件 设备 。 

。 各 种 网 络 协 议 、 代 理 、 网 关 、 防 火 墙 . 负 载 均 衡器 等 配置 。 

。 网 络 工具 的 安装 和 配置 ,如 网 络 限 速 器 ,带宽 调度 器 等 。 

在 网 络 环境 设置 中 构造 不 同 的 多 个 子 网 段 .不 仅 使 服务 器 和 客户 端 (或 测试 机 ) 不 在 
一 个 子 网 段 中 ,而 且 客户 端 (或 测试 机 ) 也 最 好 分 布 在 不 同 的 几 个 子 网 段 中 。 这 样 有 利于 
设置 防火 墙 代 理 服务 器 或 网 关 等 ,使 测试 环境 更 能 接近 真实 的 网 络 环境 。 

在 网 络 部 署 中 ,防火 墙 和 代理 服务 器 应 用 普遍 ,已 是 标准 配备 。 

3) 软件 

软件 环境 包括 操作 系统 、 网 络 协议 和 应 用 程序 。 测 试 工具 软件 也 是 软件 环境 派生 出 
来 的 一 部 分 。 建 立 软件 测试 环境 的 原则 是 选择 具有 广泛 代表 性 的 重要 操作 系统 和 大 量 应 
用 程序 。 在 兼容 性 测试 中 ,软件 环境 尤其 重要 。 

(1) 常用 的 操作 系统 。 如 Windows、Mac、Linux、UNIX 等 系列 以 及 嵌入 式 操作 系统 
等 。 某 些 操作 系统 (如 Windows 7) 还 进一步 分 为 32 位 、64 位 版 本 , Mac OS X/Solaris/ 
Linux 操作 系统 不 仅 分 32 位 、64 位 版 本 ,还 针对 不 同 的 主机 硬件 架构 (x86、PowerPC、 
Spare、Adm64 和 Arm 等 ) 有 不 同 的 版 本 。 

(2) 常用 的 数据 库 管理 系统 。 如 Oracle、SQL Server、 开 源 数 据 库 系统 MySQL, 其 他 
如 IBM DB2、Sybase、Informix 等 。 

(3) 常用 的 Web 服务 器 。 如 Apache 服务 器 .Oracle BEA WebLogic Server Web 应 
用 服务 器 .Microsoft IIS Web 服务 器 等 。 

(4) 常见 的 配置 。 例 如 : 
网 络 传输 : ADSL、Wi-Fi、Tl1 或 LAN。 
浏览 器 : MS IE、FireFox、Google Chrome、Opera、Safari 等 。 
在 下 浏览 器 中 Disable ActiveX。 
Mac OS 或 Windows 中 的 Java 虚拟 机 (JVM) 不 同 版 本 。 
经 过 或 不 经 过 代理 服务 器 的 SSL 十 HTTP 连接 。 
Windows XP、Windows 7 中 的 非 管理 员 用 户 (Normal user) 。 
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14.3.3 数据 准备 


许多 测试 用 例 取决 于 测试 数据 ,特别 是 围绕 数据 库 系 统 、 文 件 管理 系统 等 构建 的 应 用 
系统 ,测试 的 数据 不 仅 对 系统 整体 性 能 测试 非常 重要 ,对 一 些 功 能 测试 也 是 非常 重要 的 ， 
异常 数据 或 大 范围 的 数据 都 有 助 于 提高 测试 的 覆盖 率 。 测 试 数据 应 尽 可 能 地 取得 大 量 真 
实数 据 , 无 法 取得 真实 数据 时 尽 可 能 模拟 出 大 量 随机 的 数据 。 

数据 准备 包括 数据 量 和 真实 性 两 个 方面 : 

(1) 越 来 越 多 的 软件 产品 需要 处 理 大 量 的 信息 ,不 可 避免 地 使 用 到 数据 库 系统 。 少 
量 数据 情况 下 ,软件 产品 表现 出 色 ,一 旦 交付 使 用 ,数据 急速 增长 ,往往 一 个 简单 的 数据 查 
询 操作 就 可 能 耗费 掉 大 量 宝贵 的 系统 资源 ,使 产品 性 能 急剧 下 降 , 失 去 可 用 人性。 

(2) 数据 的 真实 性 通常 表现 为 正确 数据 和 错误 数据 ,在 容错 测试 中 对 错误 数据 的 处 
理 和 系统 恢复 是 测试 的 关键 。 对 于 更 为 复杂 的 散 入 式 实时 软件 系统 ,例如 惯性 导航 系统 
仅 有 惯性 平台 还 不 够 ,为 了 产生 测试 数据 ,还 必须 使 惯性 平台 按 所 要 求 的 运动 规律 进行 移 
动 。 也 可 以 用 软件 来 仿真 外 部 设备 ,模拟 真实 的 外 围 设备 。 


14.3.4 虚拟 机 的 应 用 


许多 Web 应 用 平台 的 测试 还 需要 针对 操作 系统 和 浏览 器 构成 的 组 合 平台 进行 兼容 
性 测试 ,其 结果 要 构建 大 量 不 同 的 测试 环境 。 如 果 每 种 环境 都 用 一 台 物 理 机 器 来 安装 , 那 
么 不 仅 需要 购买 很 多 机 器 ,投入 很 大 ,而 且 还 占用 很 大 的 实验 室 空 间 , 每 天 用 电量 也 是 可 
观 的 。 这 时 ,最 好 的 解决 办 法 就 是 虚拟 机 方法 。 

在 真实 计算 机 系统 中 ,操作 系统 组 成 中 的 设备 驱动 控制 硬件 资源 ,负责 将 系统 指令 转 
化 成 特定 设备 控制 语言 。 在 假设 设备 所 有 权 独 立 的 情况 下 形成 驱动 ,这 就 使 得 单个 计算 
机 上 不 能 并 发 运行 多 个 操作 系统 。 虚 拟 机 则 包含 了 克服 该 局 限 性 的 技术 ,引入 了 底层 设 
备 资源 重 定向 交互 作用 ,每 个 虚拟 机 由 一 组 虚拟 化 设备 构成 ,其 中 每 个 虚拟 机 都 有 对 应 的 
虚拟 硬件 ,而 不 会 影响 高 层 应 用 层 。 虚 拟 化 技术 可 以 提供 负载 隔离 ,为 所 有 系统 运算 和 
1/O 设计 的 微型 资源 控制 。 通 过 虚拟 机 ,客户 可 以 在 单个 计算 机 上 并 发 运行 多 个 操作 系 
统 、 操 作 系统 的 多 个 版 本 或 实例 。 虚 拟 化 技术 整合 空闲 的 系统 资源 ,充分 利用 硬件 资源 ， 
节约 能 源 和 空间 ,并 能 提升 系统 的 运作 效率 ,有 利于 测试 环境 的 建立 和 维护 。 

根据 统计 ,一 些 客户 环境 中 至 少 有 70% 的 服务 器 利用 率 只 有 20% 一 30%% ,而 通过 
VMware 可 以 将 服务 器 的 利用 率 提高 到 85% 一 95%。 如 果 内 存 加 大 到 16GB 或 更 高 ,一 
台 机 器 可 以 虚拟 4 一 8 台 服 务 器 ,而 原来 十 几 台 服务 器 的 要 求 , 现 在 只 需要 买 3 台 甚至 更 
少 的 服务 器 就 可 以 了 。 

一 台 机 器 虽然 只 能 虚拟 4 一 8 台 服 务 器 ,但 可 以 事先 建立 十 几 套 虚拟 机 镜像 文件 ,把 
这 些 镜像 作为 虚拟 机 来 保存 。 测 试 时 ,只 要 花 几 分 钟 就 可 以 装载 所 需 的 镜像 文件 ,更 换 为 
新 的 测试 环境 ,而 不 必 为 重建 系统 等 上 数 小 时 。 这 在 自动 化 测试 时 特别 有 用 ,每 一 个 测试 
套件 执行 完 以 后 ,都 需要 恢复 最 初 的 测试 环境 ,就 要 靠 虚 拟 机 镜像 来 创建 回 深 机 制 
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(rollback) ,在 几 分 钟 之 内 就 能 把 系统 恢复 到 之 前 的 初始 状态 。 
14.4 建立 测试 实验 室 


对 于 专业 的 测试 公司 或 拥有 专业 测试 队伍 的 公司 ,应 建立 不 同 的 测试 实验 室 以 适应 
不 同 软件 的 测试 需求 。 建 立 独 立 的 测试 实验 室 ,特别 是 建立 性 能 测试 实验 室 ,不 仅 使 测试 
环境 管理 更 加 专业 化 和 规范 化 ,而 且 可 以 充分 利用 资源 ,提高 测试 效率 ,降低 测试 成 本 。 


14.4.1 实验 室 建立 的 评估 分 析 


并 不 是 所 有 的 软件 公司 都 需要 测试 实验 室 。 某 些 公司 只 是 在 特定 的 时 期 需要 测试 实 
验 室 ;其 他 一 些 公司 从 来 就 没有 过 测试 实验 室 ,而 是 将 测试 工作 交 给 专业 测试 公司 去 做 。 
在 决定 是 否 建立 实验 室 时 需要 事先 评估 ,进行 可 行 性 分 析 。 通 常 需要 考虑 的 问题 包括 : 

(1) 是 否 需要 长 期 使 用 的 测试 设备 ? 

(2) 是 否 需 要 特殊 的 环境 ? 

(3) 是 否 存 在 安全 性 问题 ? 

(4) 是 否 需要 体积 庞大 的 测试 工具 ? 

综合 上 述 因 素 进行 分 析 ,如 果 确 实 需要 测试 实验 室 , 先 试 着 单独 为 测试 实验 室 做 一 个 
预算 。 如 果 预 算 让 人 无 法 承受 ,那么 就 需要 寻找 其 他 的 方案 ,如 虚拟 机 方案 ,寻求 供应 商 、 
政府 等 的 外 部 资源 ,尽量 使 用 开源 软件 等 。 如 果 预 算 还 很 高 ,可 以 考虑 租用 第 三 方 的 测试 
实验 室 ,或 将 耗资 源 的 性 能 测试 和 压力 测试 等 外 包 出 去 ,内 部 团队 只 负责 功能 测试 。 


14.4.2 选择 和 规划 实验 室 


一 旦 决定 建立 自己 的 测试 实验 室 , 就 需要 为 实验 室 选择 场所 并 规划 它 的 配置 。 应 当 
考虑 各 种 因素 ,例如 空间 尺寸 .照明 布局、 功能 区 、 电 源 、 静 电 , 温 度 、 湿 度 、 消 防 安全 等 , 尽 
可 能 详细 绘 出 实验 室 的 平面 规划 图 ,然后 不 断 地 完善 规划 。 根 据 各 种 因素 综合 考虑 规划 
一 个 较 完美 的 实验 室 环境 ,让 测试 工作 在 一 个 舒适 的 环境 中 完成 ,避免 因 环境 问题 带 来 的 
困扰 。 


14.4.3 集成 和 配置 测试 设备 


每 个 测试 实验 室 都 有 不 同 的 设备 需求 ,而 且 任何 特定 设备 的 重要 性 依赖 于 它 所 支持 
的 特定 测试 的 重要 性 。 假 定 要 为 公司 建立 一 个 测试 实验 室 ,首先 要 理 出 一 个 设备 清单 , 然 
后 进行 预算 评估 ,接着 采购 设备 .集成 安装 。 

测试 环境 的 各 要 素 也 就 是 实验 室 配置 清单 的 主要 内 容 。 一 个 完整 的 实验 室 配置 清单 
不 仅 包括 测试 中 所 需 的 软 硬 件 、 工 具 、 数 据 等 ,而 且 还 包括 实验 室 所 需 的 其 他 设备 ,如 空 
调 、 去 湿 机 ,温度 /湿度 计 等 。 
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14.5 建立 项 目的 测试 环境 


针对 某 个 具体 项 目 , 测 试 环 境 的 要 求 会 更 明确 ,无 论 是 对 服务 器 、 支 撑 平 台 软 件 还 是 
对 网 络 配置 .应 用 软件 等 都 需要 进行 具体 的 规划 和 定义 ,完成 相应 的 配置 ,以 满足 具体 项 
目的 测试 工作 要 求 。 

为 了 建立 正确 的 测试 环境 ,要 基于 下 列 文档 和 其 他 要 求 来 完成 测试 环境 的 配置 。 

。 软件 架构 文档 ,了 解 系统 架构 设计 的 细节 ,包括 服务 器 之 间 、 数 据 通道 等 之 间 的 
部 署 模型 ,如 本 地 部 署 、 远 程 部 署 、 网 络 共享 部 署 , 热 部 署 等 。 
测试 自动 化 架构 ,如 何 有 效 地 支持 自动 化 测试 的 实施 。 
测试 数据 的 要 求 ,包括 数据 量 、 负 载 模式 等 。 
测试 策略 和 测试 方法 ,会 影响 测试 环境 的 设计 。 

一 般 测试 环境 部 署 的 实施 过 程 可 以 简单 归纳 为 下 列 6 个 步骤 。 

(1) 服务 器 ,存储 器 的 准备 ,包括 服务 器 的 加 电 测试 ,存储 设备 的 连接 和 划分 ,通常 通 
过 存储 管理 工具 实现 存储 划分 和 配置 。 

(2) 启动 ,通过 系统 管理 工具 引导 操作 系统 ,或 者 先 安装 虚拟 机 系统 。 

(3) 安装 操作 系统 ,在 测试 环境 中 ,一 般 会 直接 安装 系统 的 镜像 文件 ,而 镜像 文件 是 
由 系统 运行 管理 部 门 制作 ,因为 这 个 部 门 直接 负责 产品 实际 运行 的 环境 。 

(4) 网 络 配置 ,根据 测试 需求 ,一 方面 将 服务 器 配置 到 相应 的 网 络 环境 中 , 男 一 方面 ， 
还 要 完成 负载 均衡 器 、 防 火 墙 或 代理 服务 器 等 的 配置 。 

(5) 安装 应 用 系统 ,包括 Web 服务 器 ,中间 件 .数据库 和 应 用 软件 系统 等 。 

(6) 配置 并 启动 应 用 软件 ,并 进行 不 断 的 调试 ,使 应 用 软件 运行 环境 符合 设计 要 求 。 


14.6 测试 环境 的 维护 和 管理 


测试 环境 的 维护 和 管理 ,不 仅 包括 硬件 设备 的 保养 维修 和 软件 版 本 的 及 时 升级 ,更 重 
要 的 是 维护 测试 环境 的 正确 性 ,定期 检查 软件 和 网 络 的 配置 ,做 好 记录 和 跟踪 ,确保 测试 
环境 始终 符合 测试 的 实际 要 求 。 为 了 做 好 测试 环境 的 维护 和 管理 ,首先 要 建立 测试 环境 
的 管理 流程 和 规章 制度 ,严格 的 管理 流程 能 够 保证 和 改善 测试 环境 的 正确 性 、 稳 定性 。 

为 了 更 好 地 做 好 测试 环境 的 维护 和 管理 ,通常 还 会 设置 专门 的 实验 室 管理 员 ,明确 其 
责任 ,并 建立 好 相应 的 文档 及 其 模板 ,为 关键 的 硬件 设备 和 软件 环境 建立 备份 。 


14.6.1 测试 环境 管理 员 的 职责 


测试 环境 管理 员 的 职责 包括 : 
。 建立 和 完善 测试 环境 管理 的 相关 制度 和 流程 ; 
。 基础 测试 环境 的 搭建 ,包括 操作 系统 、 数 据 库 、 中 间 件 、Web 服务 器 等 的 安装 和 配 
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置 ,以 及 相关 文档 的 编写 存档 ; 

相关 资源 (如 路 由 器 \ 数 据 库 `Web 服务 器 等 ) 访 问 权限 (包括 用 户 名 ,口令 等 ) 的 设 
定 、 定 期 更 新 和 审查 ; 

记录 组 成 测试 环境 的 各 类 设备 名 称 、 配 置 、IP 地 址 、 端 口 配置 .用 途 以 及 当前 状态 
(占用 、 空 闲 、 报 废 等 ); 

测试 环境 各 项 变更 的 执行 及 记录 ; 

测试 环境 的 备份 及 恢复 ; 

协助 项 目 组 完成 被 测 应 用 系统 的 部 署 ; 

协助 IT 部 门 完成 测试 环境 的 各 类 设备 采购 ` 入 库 等 ; 

协助 测试 经 理 做 好 资源 的 分 配 、 调 度 等 工作 。 


14.6.2 测试 环境 管理 所 需 的 文档 


测试 环境 管理 所 需 的 文档 包括 : 


软 硬 件 资 产 清单 ,包括 厂家 、 品 牌 . 型号、 购买 日 期 ,人 库 日 期 ,所 有 者 数量 ,关键 
特性 指标 、 变 更 记录 等 ; 

关键 设备 (如 路 由 器 .防火墙 、 负 载 平 衔 设 备 等 ) 和 系统 (操作 系统 .数据 库 管理 系 
统 , 中 间 件 等 ) 的 安装 配置 手册 ; 

环境 资源 访问 权限 列表 ,及 其 变更 记录 等 ; 

测试 环境 的 备份 和 恢复 过 程 文档 ,包括 历史 发 生 的 记录 (如 备份 时 间 、 备 份 人 、 原 
因 、 备 份 文件 名 、 备 份 文件 来 源 和 获取 方式 等 )。 


14.6.3 测试 环境 访问 权限 的 管理 


针对 测试 环境 访问 权限 的 管理 ,需要 注意 的 是 : 


权限 由 测试 环境 管理 员 统一 管理 。 为 了 安全 起 见 , 应 在 测试 经 理 或 相应 的 管理 人 
员 那 里 有 一 个 备份 ; 

为 访问 测试 环境 的 每 个 人 设置 单独 的 用 户 名 和 口令 ,口令 可 以 强制 每 一 个 月 或 一 
个 季度 改变 一 次 ; 

将 测试 环境 访问 人 员 分 类 ,不 同类 别 的 人 有 不 同 的 访问 权限 。 例 如 ,开发 人 员 只 
有 “ 读 ” 的 权限 ,没有 “修改 、 删 除 ” 等 权限 ; 

除 测试 环境 管理 员外 ,其 他 测试 组 成 员 不 授予 删除 权限 ,更 不 要 将 root 或 
Administrator 的 权限 赋予 一 般 的 测试 人 员 ; 

和 户 及 权限 的 各 项 维护 .变更 需要 记录 到 相应 的 “用 户 权限 管理 文档 ”中 。 


14.6.4 测试 环境 的 变更 管理 


一 


对 测试 环境 的 变更 应 当 形成 一 个 标准 的 流程 ,并 保证 每 次 变更 都 是 可 追溯 的 和 可 
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控 的 。 
。 测试 环境 的 变更 一 般 由 测试 组 长 提出 书面 申请 (如 电子 邮件 ) ,由 测试 环境 管理 员 
负责 执行 ,或 授予 测试 组 长 临时 权限 ,自行 处 理 ; 
。 在 测试 环境 变更 之 前 ,应 该 确定 一 个 明确 的 方法 ,能 够 返回 到 变更 之 前 的 状态 ; 
。 测试 环境 的 任何 变更 均 应 记 入 相应 的 文档 中 ,包括 变更 申请 邮件 、 脚 本 等 原始 文 
档 , 作 为 配置 项 进行 管理 。 


14.6.5 测试 环境 的 备份 和 恢复 


对 于 测试 人 员 来 说 ,测试 环境 必须 是 可 恢复 的 ,和 否则 将 导致 原 有 的 测试 用 例 无 法 执 
行 ,或 者 发 现 的 缺陷 无 法 重 现 。 因 此 ,应 当 在 测试 环境 (特别 是 数据 库 环 境 ) 发 生 重大 变动 
时 进行 完整 的 备份 ,例如 使 用 Ghost 对 硬盘 或 某 个 分 区 进行 镜像 备份 ,以 便 在 需要 时 将 
系统 重新 恢复 到 安全 可 用 的 状态 。 

另外 ,每 次 发 布 新 的 被 测 应 用 版 本 时 ,应 当做 好 当前 版 本 的 数据 库 备 份 , 为 将 来 做 版 
本 兼容 性 测试 (版 本 升级 测试 ) 时 做 好 准备 。 例 如 ,对 于 一 些 提供 软件 服务 的 应 用 系统 , 当 
其 版 本 升级 到 一 个 新 版 本 时 ,要 验证 在 原来 版 本 中 产生 的 数据 在 新 版 本 时 依然 有 效 , 而 新 
版 本 的 数据 库 结构 已 发 生 了 一 些 变化 ,这 些 数据 不 能 在 新 版 本 中 产生 ,否则 数据 是 不 真实 
的 。 在 进行 兼容 性 测试 时 ,最 好 用 已 备份 的 数据 库 来 恢复 到 原来 的 数据 库 后 ,再 进行 版 本 
升级 ,然后 进行 测试 。 这 种 兼容 性 测试 可 能 会 进行 多 次 ,而 且 可 能 会 在 下 一 个 版 本 兼容 性 
测试 中 还 要 用 到 。 这 时 ,数据 库 的 备份 不 仅 保证 了 数据 的 真实 性 、 完 整 性 ,还 大 大 减少 了 
重新 准备 数据 的 时 间 ,提高 了 测试 的 效率 。 


14.7 习题 


请 参考 课文 内 容 以 及 其 他 资料 ,完成 下 列 选择 题 。 
(1) 下 列 有 关 软 件 测试 设计 的 说 法 中 ,正确 的 是 ( ) 。 
A. 测试 方案 应 考虑 是 否 可 行 .是 否 有 效 和 是 否 能 够 达到 预期 的 测试 目标 
B. 基于 判定 表 的 测试 用 例 设计 方法 是 白 盒 测试 用 例 设 计 方 法 
C. 测试 方案 设计 中 可 以 忽略 软件 系统 的 实际 使 用 环境 
D. 测试 开发 不 是 测试 用 例 设计 的 工作 内 容 
(2) 下 列 关 于 测试 团队 的 说 法 中 不 正确 的 是 ( i 
A. 建立 ,组 织 和 管理 一 支 优秀 的 测试 团队 是 做 好 软件 测试 工作 的 基础 ,也 是 最 
重要 的 工作 之 一 
B. 测试 团队 的 规模 一 般 要 非常 的 大 ,哪怕 再 小 的 软件 测试 小 组 也 不 能 一 个 人 
. 测试 人 员 的 基本 职责 是 发 现 系统 的 缺陷 
D. 测试 组 织 管理 就 是 如 何以 最 小 的 成 本 、 最 高 的 效率 在 计划 时 间 内 发 现 系 统 尽 
可 能 多 的 和 有 价值 的 缺陷 
(3) 软件 测试 环境 包括 ( 站 
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A. 测试 设计 环境  B. 测试 实施 环境  C. 测试 管理 环境 D. 以 上 全 部 


(4) 下 列 哪个 不 是 测试 环境 的 组 成 要 素 ?( ) 


A. 软 硬 件 B. 技术 文档 C. 测试 工具 D. 网 络 环境 


(5) 下 列 哪 项 工作 与 软件 缺陷 管理 和 追踪 无 关 ? ( ) 


A. 对 缺陷 应 该 包含 的 信息 条 目 ,状态 分 类 等 进行 完善 设计 

B. 通过 软件 系统 自动 发 送 通知 给 相关 开发 和 测试 人 员 ,使 缺陷 得 到 及 时 处 理 
C. 对 测试 用 例 的 执行 结果 进行 记录 和 追踪 

D. 通过 一 些 历史 曲线 和 统计 曲线 来 分 析 和 预测 未 来 的 缺陷 发 展 情况 


(6) 以 下 哪 一 项 不 属于 测试 策划 的 内 容 ? 〈 ) 


A. 确定 测试 的 充分 性 要 求 B. 建立 测试 环境 
C. 提出 测试 的 基本 方法 D. 制定 测试 计划 


(7) 以 下 叙述 中 正确 的 是 ( Ys 


A. 可 跟踪 性 分 析 是 在 整体 上 分 析 整 个 资源 的 分 配 策略 

B. 关键 性 分 析 是 标识 原始 需求 和 相应 开发 结果 之 间 关系 的 能 力 

C. 接口 分 析 必须 关注 3 种 接口 : 用 户 接 口 ,硬件 接口 和 软件 接口 

D. 评估 权 在 软件 开发 的 最 后 阶段 进行 ,以 确认 产品 是 否 符合 规格 说 明 


(8) 以 下 关于 极限 测试 的 说 法 中 ,正确 的 是 ( )。 


A. 极限 测试 是 一 种 针对 极限 编程 的 软件 测试 

B. 极限 测试 中 所 有 的 测试 均 由 编码 人 员 完成 

C. 与 传统 的 软件 测试 相 比 ,极限 测试 是 一 种 更 严格 的 测试 
D. 极限 测试 中 只 需要 进行 单元 测试 


14.8 实验 与 思考 


14.8.1 实验 目的 


本 章 实验 的 目的 : 
(1) 熟悉 软件 测试 团队 建设 和 软件 测试 环境 架构 的 相关 概念 与 知识 。 
(2) 尝试 规划 设计 一 个 测试 项 目 。 确 定 拟 开展 的 测试 类 型 。 依 据 GB/T 15532 一 


2008《 计 算 机 软件 测试 规范 》, 完 成 测试 设计 ,内 容 包 括 : 测试 对 象 , 测 试 实施 方 (组 织 和 管 


理 ) ,测试 人 员 配 备 ,测试 准 入 条 件 测试 准 出 条 件 、 测 试 技术 条 件 , 测 试 内 容 简 述 、 测 试 过 


程 简 述 和 测试 应 交付 文档 。 


14.8.2 工具 /准备 工作 
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在 开始 本 实验 之 前 ,请 回顾 教科 书 的 相关 内 容 。 
需要 准备 一 台 带 有 浏览 器 ,能 够 访问 因特网 的 计算 机 。 
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14.8.3 实验 内 容 与 步骤 


在 本 实验 中 ,我 们 尝试 规划 设计 一 个 测试 项 目 。 请 在 下 列 测试 活动 中 选择 其 中 的 一 
个 测试 项 目 : 
单元 测试 集成 测试 
系统 测试 验收 测试 
你 将 该 项 目 命名 为 : 
请 依据 GB/T15532 一 2008《 计 算 机 软件 测试 规范 》, 针 对 你 所 确定 的 测试 项 目 , 完 成 
以 下 测试 设计 : 
1) 测试 对 象 : 


配置 项 测试 
回归 测试 


口 
口 


2) 测试 实施 方 (组 织 和 管理 ): 。 
3) 测试 人 员 配备 : 请 填 人 表 14-3。 


表 14-3 
工作 角色 具体 职责 
口 需要 口 不 需要 
测试 项 目 负责 人 若 需 要 , 则 其 具体 工作 职责 为 : 
口 需要 ” 口 不 需要 
测试 分 析 员 若 需要 , 则 其 具体 工作 职责 为 : 
口 需要 口 不 需要 
测试 设计 员 若 需要 , 则 其 具体 工作 职责 为 : 
口 需要 ” 口 不 需要 
测试 程序 员 若 需要 , 则 其 具体 工作 职责 为 : 
] 需要 。” 口 不 需要 
测试 员 若 需要 , 则 其 具体 工作 职责 为 : 
口 需要 口 不 需要 
测试 系统 管理 员 若 需要 , 则 其 具体 工作 职责 为 : 
] 需要 口 不 需要 
配置 管理 员 若 需要 , 则 其 具体 工作 职责 为 : 
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4) 测试 准 入 条 件 : 


ly 


(2) 


(3) 


(4) 


5) 测试 准 出 条 件 : 


《1 


(2) 


(3) 


(4) 


(5) 


(6) 


(7) 


(8) 


6) 测试 技术 条 件 : 


(1) 


(2) 


(3) 


(4) 


(5) 


(6) 


(7) 


(8) 


(9) 


(10) 


7) 测试 内 容 简 述 : 


CY 


(2) 


(3) 


(4) 


(5) 


(6) 


(7) 
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(8) y 
(9) ; 
(10) 

8) 测试 过 程 简 述 : 


(1) 测试 策划 : 


(2) 测试 设计 : 


(3) 测试 执行 : 


(4) 测试 总 结 : 


9) 测试 应 交付 文档 : 


(1) 了 
(2) 
(3) 了 
(4) 了 
(5) 


14.8.4 实验 总 结 


14.8.5 实验 评价 (教师 ) 
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14.9 阅读 与 分 析 : Google 的 产品 质量 之 道 


James Whittaker 是 Google 的 测试 总 监 , 曾 任 微软 构架 师 , 也 是 “实用 软件 测试 指南 ” 
系列 图 书 中 好 几 本 书 的 作者 。 他 写 了 一 系列 的 博文 ,介绍 Google 是 如 何 进行 测试 的 。 
Google 把 开发 和 测试 紧密 结合 在 一 起 ,测试 人 员 相 对 较 少 ,每 个 产品 在 正式 上 线 前 都 要 
经 过 好 几 个 不 同 的 版 本 。 

Google 保证 产品 质量 的 方法 和 很 多 公司 不 一 样 。Google 没有 一 个 庞大 的 测试 部 门 ， 
相反 ,部 分 测试 工作 委派 给 了 开发 人 员 。Whittaker 写 道 : 

测试 和 开发 同时 进行 。 编 写 一 些 代 码 , 马 上 进行 测试 和 构建 。 接 着 ,编写 更 多 的 代 
码 , 继 续 测试 。 更 好 的 是 ,在 你 编码 的 时 候 或 者 编码 之 前 ,就 计划 好 你 的 测试 。 测 试 不 是 
一 个 独立 分 开 的 过 程 , 它 是 开发 的 一 部 分 。 质 量 不 等 同 于 测试 ;要 想 有 高 质量 的 产品 ,就 
要 把 开发 和 测试 紧密 捆绑 在 一 起 ,直到 不 分 彼此 。 

这 是 因为 ,Google 认为 要 保证 质量 ,预防 胜 于 检查 。 

质量 来 自 开发 ,而 不 是 测试 。 为 了 拓宽 开发 环节 ,我 们 可 以 把 测试 融入 开发 中 去 。 
Google 建立 了 一 个 超 高 效 的 增 量 流程 ,只 要 有 一 个 增 量 被 证 明 缺 陷 太 多 ,就 可 以 回 滚 这 
些 错误 。 这 不 仅 预防 了 很 多 产品 级 问题 ,还 大 大 地 减少 了 那些 为 确保 消除 “召回 级 别 ” 缺 
陷 而 安排 的 测试 人 员 的 人 数 。 

因此 ,在 Google, 测 试 人 员 不 用 做 测试 是 众所周知 的 ,他 们 只 要 “确保 他 们 ( 指 开 发 人 
员 ) 有 自动 框架 和 相关 流程 ”进行 测试 即 可 。 开 发 人 员 进 行 必 要 的 测试 ,他 们 对 他 们 的 代 
码 质 量 负 责 。 这 其 实 就 是 强调 了 一 点 :“ 质 量 的 重担 落 在 那些 负责 交付 正确 产品 的 开发 
人 员 的 肩 上 。?" 为 了 实现 他 们 的 质量 哲学 ,Google 有 3 种 类 型 的 工程 师 。 

SWE 或 者 软件 工程 师 是 传统 的 开发 角色 。SWE 编写 最 终 交 付 给 客户 的 功能 代码 。 
他 们 编写 设计 文档 ,设计 数据 结构 以 及 整体 架构 , 花 绝 大 部 分 时 间 编 写 和 审查 代码 。 
SWE 会 编写 很 多 测试 代码 ,包括 测试 驱动 设计 ,单元 测试 ,以 及 参与 到 简单 .中 等 其 至 复 
杂 的 测试 集成 中 去 。SWE 们 对 他 们 参与 的 一 切 的 质量 负责 ,不 管 是 他 们 编写 的 、 修 复 的 
或 者 是 修改 的 。 

SET 或 者 测试 软件 工程 师 也 是 开发 角色 ,只 是 他 们 专注 于 易 测 性 。 他 们 审查 设计 ， 
密切 关注 代码 质量 和 风险 。 他 们 重 构 代 码 , 让 代码 更 加 易于 测试 。SET 需要 编写 单元 测 
试 框架 和 自动 化 测试 。 他 们 的 代码 也 会 提交 到 SWE 所 工作 的 代码 库 , 但 是 他 们 更 加 关 
注 提 高 质量 和 测试 覆盖 率 ,而 不 是 增加 新 功能 或 者 提高 性 能 。 

TE 或 者 测试 工程 师 则 跟 SET 恰恰 相反 。 他 们 这 个 角色 会 把 测试 放 在 首位 ,而 把 开 
发 放 其 次 。 很 多 Google 的 TE 会 花 很 多 时 间 来 编写 模拟 了 实际 使 用 场景 甚至 是 模拟 了 
用 户 的 自动 化 脚本 和 代码 。 他 们 也 整理 SWE 和 SET 的 测试 工作 ,解读 测试 结果 从 而 驱 
动 测试 ,他 们 也 会 在 项 目 后 期 参与 到 项 目 中 去 ,来 强力 推动 项 目 发 布 。TE 是 产品 专家 ， 
质量 顾问 也 是 风险 分 析 员 。 

换 句 话说 ,SWE 负责 软件 功能 特性 和 它们 的 质量 。SET 提供 代码 支持 ,从 而 使 SWE 
能 测试 这 些 产 品 特 性 。TE 快速 地 测试 系统 或 者 再 次 检查 那些 被 开发 人 员 忽 略 的 主要 缺 
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陷 。 并 且 , 他 们 协助 用 户 测试 ,还 进行 性 能 、 安 全 以 及 其 他 类 似 的 测试 。 

在 公司 级 别 ,Google 有 几 个 关注 域 (Focus Areas) 搜索 、 广 告 .、 应 用 程序 、 移 动 服 
务 、 操 作 系 统 等 。 其 中 有 一 个 关注 域 是 工程 生产 力 (Engineering Productivity, EP), 它 包 
括 了 一 些 “ 横 向 和 纵向 的 工程 规范 ,测试 是 其 中 最 大 的 一 块 。EP 包括 : 

产品 团队 一 一 为 整个 Google 的 所 有 工程 师 提供 能 提高 生产 力 的 工具 ,包括 开源 项 
目 , 比 如 “代码 分 析 器 ,IDE、 测 试用 例 管理 系统 、 自 动 测试 工具 、 构 建 发 布 系统 、 版 本 控制 
系统 、 代 码 审 查 安排 系统 、 缺 陷 数 据 库 。” 

服务 团队 一 一 为 任何 Google 员工 提供 关于 可 靠 性 ,安全 ,国际 化 等 领域 的 专业 知识 ， 
包括 “工具 文档、 测试 发布 管 理 \ 培 训 ” 等 。 

派遣 式 的 工程 团队 一 一 在 Google, 测 试 人 员 会 被 借调 去 不 同 的 产品 团队 。 他 们 可 以 
选择 为 一 个 团队 服务 很 多 年 ,但 公司 鼓励 他 们 去 不 同 的 团队 轮 岗 , 从 而 能 够 “在 产品 知识 
和 新 鲜 视野 之 间 ” 保 持 一 个 良好 的 平衡 。 这 些 测 试 人 员 参 与 到 产品 团队 中 的 很 多 不 同 的 
关注 域 , 但 是 从 组 织 关系 上 来 说 ,他 们 汇报 给 EP 管理 层 。 这 样 做 的 理由 是 能 够 建立 一 个 
“让 测试 人 员 共 享 知 识 和 信息 的 论坛 。 好 的 测试 想法 在 EP 内 部 很 容易 传播 开 来 ,从 而 使 
所 有 测试 人 员 ,不 管 他 们 为 哪个 产品 服务 ,都 能 够 了 解 到 公司 内 最 好 的 技术 。” 

这 种 测试 策略 带 来 的 结果 就 是 相对 较 少 的 测试 人 员 。 根 据 Whittaker 的 观点 ,这 也 
可 能 是 因为 “我 们 很 少 尝试 一 次 快速 交付 很 多 功能 。 事 实 上 ,我 们 的 目标 恰恰 相反 : 构建 
一 个 产品 的 核心 部 分 ,一 旦 它 对 很 多 人 有 价值 ,我 们 就 发 布 这 个 产品 ,随后 我 们 收集 反馈 ， 
继续 迭代 。” 另 外 一 个 确保 质量 的 关键 元 素 是 使 用 多 重 版 本 。Whittaker 以 Chrome 为 例 ， 
介绍 了 4 种 不 同 的 版 本 : 

金 丝 瞧 版 (Canary Channel) 一 一 还 没有 做 好 发 布 准备 的 代码 ; 

开发 版 一 一 开发 人 员 使 用 的 版 本 ; 

内 部 测试 版 (Test Channel) 一 一 为 了 准备 beta 发 布 的 版 本 ; 

测试 (beta) 或 者 发 布 版 一 一 这 个 版 本 的 产品 可 供 Google 内 部 或 者 公众 使 用 。 

产品 发 布 以 后 ,如 果 发 现 了 一 个 缺陷 ,我 们 会 编写 一 个 测试 ,并 且 在 所 有 的 版 本 中 进 
行 验 证 ,看 看 这 个 缺陷 是 不 是 已 经 在 某 个 版 本 里 面 被 修复 了 。 

简单 来 说 ,这 就 是 Google 用 来 测试 他 们 的 产品 .确保 代 码 质量 的 流程 和 组 织 结构 。 

资料 来 源 : 作者 Abel Avram, 译 者 金 毅 ,来 源 : InfoQ,2011-3-15。 
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第 15 章 ”软件 测试 自动 化 


软件 测试 是 一 项 艰苦 的 工作 ,需要 投入 大 量 的 时 间 和 精力 。 据 统计 ,软件 测试 会 占用 
整个 开发 时 间 的 40%。 而 一 些 高 可 靠 性 要 求 的 软件 ,测试 时 间 甚 至 占 到 总 开发 时 间 的 
60%。 软 件 测试 具有 一 定 的 重复 性 ,测试 后 期 所 进行 的 回归 测试 和 前 期 测试 有 相当 部 分 
的 工作 是 一 样 的 。 回 归 测 试 就 是 验证 已 经 实现 的 大 部 分 功能 ,只 是 为 了 解决 软件 缺陷 , 需 
求 变化 与 代码 修改 很 少 ,针对 代码 变化 所 做 的 测试 相对 比较 少 。 而 为 了 覆盖 代码 改动 所 
造成 的 影响 需要 进行 大 量 的 测试 ,虽然 这 种 测试 找到 软件 缺陷 的 可 能 性 小 ,效率 比较 低 ， 
但 又 是 必要 的 。 此 后 ,软件 不 断 升 级 ,所 要 做 的 测试 重复 性 也 很 高 。 所 有 这 些 因 素 驱动 着 
软件 自动 化 测试 的 产生 和 发 展 。 

软件 测试 自动 化 主要 是 通过 所 开发 的 软件 测试 工具 、 肢 本 等 来 实现 ,具有 良好 的 可 操 
作 性 、 可 重复 性 和 高 效率 等 特点 。 自 动 化 测试 是 软件 测试 中 提高 测试 效率 、 获 盖 率 和 可 靠 
性 的 重要 测试 手段 。 也 可 以 说 ,自动 化 测试 是 软件 测试 不 可 分 割 的 一 部 分 。 


15.1 自动 化 测试 的 原理 与 方法 


软件 测试 自动 化 的 基本 结构 由 6 部 分 组 成 ,如 图 15-1 所 示 。 
文件 服务 器 
ij 一 


Build 系 统 编译 三 拷贝 测试 文件 
DEV/Test Build 0 - 


数据 库 服务 器 


控制 服务 器 指令 通信 yj 改过 
测试 用 例 、 脚 ea 
本 等 工作 项 目 固 运行 控制 
测试 结果 


Web 服 务 器 


操作 请 求 测试 工作 机 
15-1 自动 化 测试 的 基本 结构 


。 存放 程序 软件 包 和 测试 软件 包 的 文件 服务 器 。 在 这 个 服务 器 上 构建 和 存放 这 些 
软件 包 。 

。 存 储 测试 用 例 和 测试 结果 的 数据 库 服 务 器 。 可 提高 过 程 管理 的 质量 ,同时 生成 统 
计 所 需要 的 数据 。 
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执行 测试 的 运行 环境 。 测 试 实验 室 或 一 组 测试 用 的 服务 器 .PC 机 。 单 元 测试 或 
集成 测试 可 能 单机 运行 ,但 系统 测试 或 回归 测试 就 可 能 需要 多 台 计 算 机 在 网 络 上 
同时 运行 。 
控制 服务 器 。 负 责 测试 的 执行 调度 。 从 服务 器 读 取 测试 用 例 , 向 测试 环境 中 的 代 
理发 布 命令 。 
Web 服务 器 。 负 责 显示 测试 结果 ,生成 统计 报表 、 结 果 曲 线 。 作 为 测试 指令 的 转 
接点 ,接收 测试 人 员 的 指令 ,向 控制 服务 器 传送 。 同 时 ,根据 测试 结果 ,自动 发 出 
电子 邮件 给 测试 或 开发 的 相关 人 员 。Web 服务 器 让 开发 团队 的 成 员 可 以 方便 地 
查询 测试 结果 ,也 方便 测试 人 员 在 自己 的 办 公 室 运 行 测试 。 
客户 端 程序 。 测 试 人 员 在 自己 计算 机 上 安装 的 程序 。 许 多 时 候 , 需 要 一 些 特殊 的 
软件 来 执行 测试 结果 与 标准 输出 的 对 比 或 分 析 工 作 。 可 能 有 部 分 输出 内 容 不 能 
直接 对 比 , 此 时 就 要 用 程序 进行 处 理 。 

理想 的 测试 工具 可 以 在 任何 一 个 路 径 位 置 上 运行 ,可 以 到 任何 路 径 位 置 取得 测试 用 
例 , 同 时 也 可 以 把 测试 的 结果 输出 到 任何 路 径 位 置 。 这 样 的 设计 ,可 以 使 不 同 的 测试 运行 
使 用 同一 组 测试 用 例 且 不 会 互相 干扰 ,也 可 以 灵活 使 用 硬盘 的 空间 ,并 且 使 备份 工作 易于 
控制 。 同 时 ,软件 自动 测试 工具 必须 能 够 有 办 法 方便 地 选择 测试 用 例 库 中 的 全 部 或 部 分 
内 容 来 运行 ,也 必须 能 够 自由 地 选择 被 测 产品 或 中 间 产 品 作为 测试 对 象 。 

1) 代码 分 析 

类 似 于 高 级 编译 系统 ,是 一 种 白 盒 测试 的 自动 化 方法 。 一 般 针 对 不 同 的 高 级 语言 
构造 分 析 工 具 , 在 工具 中 识别 类 、 函 数 、 对 象 . 变 量 等 定义 规则 和 语法 规则 。 在 分 析 时 对 代 
码 进 行 扫描 , 找 出 不 符合 编码 规范 的 地 方 。 根 据 某 种 质量 模型 评价 代码 的 质量 ,生成 系统 
的 控制 流程 图 和 调用 关系 图 等 。 为 了 更 好 地 进行 代码 分 析 , 可 以 在 代码 中 插入 一 些 探 针 ， 
即 向 代码 生成 的 可 执行 文件 中 插入 一 些 监测 代码 ,随时 了 解 这 些 关 键 点 ,关键 时 刻 的 某 个 
变量 的 值 和 内 存 堆 栈 状 态 ,并 可 自动 记录 程序 运行 的 语句 和 分 支 等 蓝 盖 情况 。 

2) 捕获 回放 

捕获 和 回放 是 一 种 黑 盒 测试 的 自动 化 方法 。 这 种 方法 首先 将 用 户 的 每 一 步 操作 都 记 
录 下 来 。 记 录 的 方式 有 两 种 : 程序 用 户 界 面 的 像素 坐标 或 程序 显示 对 象 的 位 置 ,以 及 相 
对 应 的 操作 ,状态 变化 或 属性 变化 。 所 有 的 记录 转换 为 一 种 脚本 语言 所 描述 的 过 程 , 以 模 
拟 用 户 的 操作 。 

回放 时 ,将 脚本 语言 所 描述 的 过 程 转换 为 屏幕 上 的 操作 ,然后 将 被 测 系统 的 输出 记录 
下 来 ,与 预先 给 定 的 标准 结果 进行 比较 。 这 样 可 以 大 大 减轻 黑 盒 测 试 的 工作 量 , 在 迭代 开 
发 的 过 程 中 ,可 以 快速 进行 回归 测试 。 

3) 脚本 技术 

脚本 是 一 组 测试 工具 执行 的 指令 集合 。 脚 本 可 以 通过 录制 测试 的 操作 产生 ,然后 再 
做 修改 ,这 样 可 以 减少 脚本 编程 的 工作 量 。 当 然 , 也 可 以 直接 用 脚本 语言 编写 脚本 。 测 试 
工具 脚本 中 可 以 包含 数据 和 指令 ,并 包括 下 面 一 些 信息 : 

。 同步 信息 。 确 定 何 时 进行 下 一 个 输入 。 

。 比较 信息 。 比 较 什 么 ? 如 何 比较 ? 和 谁 比较 ? 
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。 屏幕 数据 的 捕获 和 存储 。 

。 从 何 处 读 取 另 一 个 数据 源 。 

。 控制 信息 。 

脚本 技术 围绕 着 脚本 的 结构 设计 来 实现 测试 用 例 , 并 在 建立 脚本 和 维护 脚本 的 代价 
中 得 到 平衡 ,从 中 获得 最 大 益处 。 脚 本 技术 可 以 分 为 线性 脚本 、 结 构 化 脚本 、 共 享 脚本 、 数 
据 驱 动 脚本 和 关键 字 驱 动 脚本 等 几 类 。 除 了 在 功能 测试 中 模拟 用 户 的 操作 ,脚本 技术 还 
可 以 在 性 能 测试 中 产生 虚拟 用 户 进行 并 发 操作 ,给 系统 或 服务 器 发 出 大 量 的 数据 和 操作 ， 
以 检验 系统 或 服务 器 的 响应 速度 ,数据 知 吐 量 等 能 力 。 

4) 自动 比较 

自动 测试 时 ,预期 输出 是 事先 定义 或 插入 脚本 中 的 ,然后 在 测试 过 程 中 运行 脚本 ,将 
捕获 的 结果 和 预先 准备 的 输出 进行 比较 ,从 而 确定 测试 用 例 是 否 通过 。 所 以 ,自动 比较 在 
软件 自动 化 测试 中 非常 重要 。 自 动 比较 可 以 对 比分 析 屏 幕 或 屏幕 区 域 图 像 . 比 较 窗 口 或 
窗口 上 控件 的 属性 或 数据 比较 网 页 或 比较 文件 等 。 

自动 比较 有 如 下 几 种 分 类 : 

。 静态 比较 和 动态 比较 。 动 态 比 较 是 在 测试 过 程 中 进行 比较 ,静态 比较 是 将 结果 存 
入 数 据 库 或 文件 中 ,然后 通过 另外 一 个 独立 的 工具 来 进行 结果 比较 。 
简单 比较 和 复杂 比较 。 简 单 比较 要 求实 际 结果 和 期 望 结果 完全 相同 ,而 复杂 比较 
是 一 种 智能 比较 ,允许 实际 结果 和 期 望 结 果 有 一 定 的 差异 。 智 能 比较 需要 使 用 屏 
项 搜索 技术 ,来 排除 输出 中 预期 会 出 现 的 差异 部 分 ,忽略 特定 的 差异 。 
敏感 性 测试 比较 和 健壮 性 测试 比较 。 敏 感性 测试 比较 要 求 比较 尽 可 能 多 的 信息 ， 
如 在 执行 测试 用 例 的 每 一 步 比较 整个 屏幕 的 信息 ,屏幕 输出 中 细微 的 变化 就 可 能 
导致 不 匹配 ,使 标志 测试 结果 出 错 ;健壮 性 测试 只 比较 最 少量 .最 需要 的 信息 ,如 
屏幕 的 最 后 输出 。 
比较 过 滤器 。 对 实际 输出 结果 和 期 望 结 果 进 行 预先 处 理 , 执 行 过 滤 任 务 之 后 ,再 
进行 比较 ,这 样 可 以 使 自动 比较 标准 化 ,产生 可 靠 的 测试 结果 。 

5) 测试 管理 

是 指 对 测试 输入 ,执行 过 程 和 测试 结果 进行 管理 。 除 了 对 与 手工 测试 共性 的 东西 ,如 
测试 计划 ,测试 用 例 、 测 试 套 件 、 缺 陷 、 产 品 功能 和 特性 、 需 求 变 化 等 实施 管理 外 ,还 要 对 自 
动 化 测试 中 特有 的 内 容 进行 跟踪 、 控 制 和 管理 。 主 要 有 测试 数据 文件 、 测 试 脚本 代码 、 预 
期 输出 结果 、 测 试 日 志 、 测 试 自动 比较 结果 等 。 


15.2 自动 化 测试 的 限制 


客观 地 说 , 单 靠 手工 测试 无 法 完全 实现 软件 测试 的 目标 ,存在 着 一 定 的 局 限 性 。 但 自 
动 测试 并 非 万 能 ,其 所 完成 的 功能 也 是 有 限 的 。 

(1) 不 能 取代 手工 测试 。 不 可 能 也 不 要 期 望 将 所 有 测试 活动 自动 化 。 因 为 自动 化 测 
试 的 开销 较 大 ,下 列 情 况 可 能 并 不 适合 自动 化 测试 。 

。 测试 很 少 运行 。 例 如 一 年 只 运行 一 次 。 
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。 软件 不 稳定 。 例 如 ,如 果 软 件 版 本 升级 期 间 用 户 界面 和 功能 频繁 变化 , 则 修改 相 
应 的 自动 化 测试 的 开销 也 较 大 。 

。 结果 易于 人 工 验证 但 难于 甚至 不 可 能 将 这 类 测试 自动 化 。 例 如 ,彩色 模式 的 合适 

程度 .屏幕 轮廓 的 直观 效果 等 。 

。 涉及 物理 交互 的 测试 。 例 如 ,在读 卡 机 上 刷卡 、 某 些 设备 的 连接 与 断 开 和 开关 电 

源 等 。 

并 非 所 有 手工 测试 都 应 该 自动 化 。 当 一 项 测试 需要 频繁 运行 时 , 才 需 要 将 其 自动 化 。 
好 的 测试 策略 还 应 包括 探索 性 测试 ,此 类 测试 最 好 由 手工 完成 或 至 少 先 进行 手工 测试 。 
当 软件 不 稳定 时 ,手工 测试 可 以 很 快 发 现 缺陷 。 

(2) 手工 测试 比 自动 测试 发 现 的 缺陷 更 多 。 如 果 某 个 测试 用 例 被 自动 化 ,首先 应 对 
其 正确 性 进行 测试 ,这 通常 是 手工 运行 测试 用 例 。 如 果 被 测 软件 用 某 个 测试 用 例 可 以 发 
现 缺 陷 , 那 么 手工 运行 时 ,同样 也 在 该 点 暴露 缺陷 。 根 据 经 验 , 自 动 测试 只 能 发 现 20% 的 
缺陷 ,而 手工 测试 却 可 以 发 现 80% 左 右 的 缺陷 。 

一 旦 建立 自动 测试 套件 ,就 可 进行 重复 测试 。 一 般 情 况 下 ,这 些 测试 用 例 以 前 已 经 运 
行 过 ,因此 软件 在 此 次 运行 中 暴露 的 缺陷 要 少 得 多 。 自 动 测 试 执行 工具 不 是 智能 测试 工 
具 , 而 是 再 测试 工具 , 即 回归 测试 工具 。 

(3) 对 测试 质量 的 依赖 性 极 大 。 工 具 只 能 判断 实际 结果 和 期 望 结 果 之 间 的 区 别 。 因 
此 在 自动 化 测试 中 ,测试 的 艰巨 任务 就 变 成 验证 期 望 输出 的 正确 性 。 通 常 ,工具 会 很 痛快 
地 报告 所 有 测试 都 通过 ,实际 只 是 实际 结果 和 期 望 结果 匹配 。 

(4) 自动 化 测试 不 能 提高 有 效 性 。 自 动 化 测试 并 不 会 比 手工 运行 相同 的 测试 更 有 
效 。 自 动 化 测试 可 以 提高 测试 的 效率 ,但 也 可 能 对 测试 的 进展 起 反作用 。 

(5) 自动 化 测试 可 能 会 制约 软件 开发 。 自 动 测试 比 手 工 测试 更 脆弱 。 软 件 部 分 的 改 
变 就 有 可 能 使 自动 测试 软件 崩溃 。 由 于 设置 自动 化 测试 比 手工 测试 开销 大 ,并 且 需 要 维 
护 , 这 可 能 限制 了 软件 系统 的 修复 或 改进 进度 。 同 时 ,由 于 经 济 原因 ,对 自动 测试 影响 较 
大 的 软件 修改 可 能 受到 限制 。 

(6) 工具 本 身 不 具备 想象 力 。 工 具 也 是 软件 ,只 是 按照 指令 执行 。 工 具 和 测试 者 都 
可 以 按照 指令 执行 一 组 测试 ,但 人 可 以 用 不 同 的 方式 完成 同样 的 任务 。 测 试 者 可 以 用 其 
想象 力 和 创造 力 改进 测试 ,可 能 背离 原 计 划 ,也 可 能 给 测试 增加 一 些 附加 内 容 。 

人 比 测试 工具 优越 的 另 一 个 方面 是 可 以 处 理 意外 事件 。 例 如 网 络 连接 中 断 , 此 时 必 
须 进 行 重新 连接 ,手工 测试 在 测试 期 间 就 可 及 时 解决 问题 。 而 工具 可 以 具有 某 些 事件 的 
处 理 能 力 ,但 是 处 理 问 题 毕竟 不 如 人 灵活 。 


15.3 用 脚本 技术 生成 测试 用 例 


从 目前 的 研究 结果 来 看 ,能 够 实用 化 的 测试 设计 或 测试 输入 生成 的 自动 化 技术 还 不 
成 熟 。 在 流行 的 测试 工具 中 ,主要 是 使 用 脚本 技术 来 生成 自动 化 测试 用 例 。 
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15.3.1 脚本 的 作用 、 质 量 和 编写 原则 


脚本 实际 上 是 一 种 计算 机 程序 ,是 一 组 测试 工具 执行 的 指令 集合 。 

录制 手工 脚本 的 测试 用 例 可 以 产生 线性 脚本 ,用 于 回放 手工 测试 者 执行 的 操作 。 对 
许多 测试 用 例 执 行 上 述 操作 , 则 对 每 个 测试 用 例 都 产生 一 个 脚本 。 假 如 每 一 个 测试 用 例 
都 有 一 个 支持 程序 ,如 果 有 上 千 个 测试 用 例 , 就 会 造成 效率 低下 、 维 护 开销 增加 等 问题 。 

大 多 数 工具 使 用 比 录制 方式 更 有 效 和 灵活 的 脚本 语言 ,用 来 编辑 录制 的 脚本 或 编写 
脚本 ,以 减少 一 组 自动 化 测试 用 例 的 脚本 编写 量 。 有 两 种 方式 可 以 减少 脚本 的 编写 量 。 
一 种 方式 用 编程 相对 较 少 的 一 段 脚本 ,执行 几 个 测试 用 例 的 相同 操作 或 任务 ,执行 一 个 相 
同 操作 的 每 个 测试 用 例 都 可 以 使 用 相同 的 脚本 。 另 一 种 方式 是 在 脚本 中 插入 控制 指令 ， 
使 得 工具 重复 使 用 这 些 指 令 序列 而 不 用 编写 指令 的 多 个 副本 。 一 旦 编写 了 合理 而 全 面 的 
脚本 集合 ,增加 新 的 测试 用 例 时 就 可 以 不 用 编写 脚本 。 因 此 ,上 千 个 测试 用 例 可 以 用 上 百 
个 脚本 来 实现 。 

脚本 的 具体 内 容 依赖 于 使 用 的 测试 工具 和 脚本 技术 。 粗 略 的 方式 是 尽 可 能 录制 ,并 
对 粗略 生成 的 脚本 进行 重新 架构 和 编程 。 对 于 建立 脚本 而 言 ,最 重要 的 是 要 关注 建立 及 
维护 脚本 的 代价 和 从 中 获得 的 益处 。 如 果 脚 本 被 大 量 生命 周期 较 长 的 不 同 测试 所 复 用 ， 
则 应 该 保证 该 脚本 的 合理 性 和 可 维护 性 。 如 果 脚 本 只 用 于 一 次 测试 , 则 建立 脚本 时 就 无 
须 投 入 太 多 精力 。 

由 于 脚本 是 测试 体系 的 一 个 关键 部 分 ,因此 保证 脚本 的 质量 是 非常 重要 的 。 一 个 好 
的 脚本 应 该 是 易于 使 用 和 易于 维护 的 。 


15.3.2 脚本 的 基本 结构 


脚本 技术 围绕 着 脚本 的 结构 设计 来 实现 测试 用 例 , 可 以 分 为 线性 脚本 、 结 构 化 脚本 、 
共享 脚本 ,数据 驱动 脚本 和 关键 字 驱 动 脚本 等 几 类 。 

1) 线性 脚本 

是 录制 手工 执行 的 测试 用 例 时 得 到 的 脚本 ,适合 于 简单 的 ,一 次 性 的 测试 ,多 数 用 于 
脚本 初始 化 或 演示 。 这 种 脚本 包含 所 有 的 击 键 、 移 动 和 输入 数据 等 操作 ,所 有 录制 的 测试 
用 例 都 可 以 得 到 完整 的 回放 。 对 于 线性 脚本 ,也 可 以 加 入 一 些 简 单 的 指令 ,如 时 间 等 待 和 

线性 脚本 可 能 包括 比较 。 在 录制 测试 用 例 时 ,可 以 添加 比较 指令 ,或 者 回放 脚本 录制 
的 输入 时 增加 比较 指令 。 

线性 脚本 的 优点 主要 有 : 

。 不 需要 深入 的 工作 或 计划 ,只 需 录制 手工 任务 。 

。 可 以 快速 开展 自动 化 。 

。 对 实际 操作 可 以 审计 跟踪 。 

。 用 户 不 必 是 编程 人 员 。 
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。 可 以 提供 良好 的 软件 或 工具 演示 。 

几乎 任何 可 重复 的 操作 都 可 以 使 用 线性 脚本 技术 自动 化 。 可 以 用 录制 好 的 脚本 代替 
操作 进行 演示 。 

对 于 建立 长 期 的 自动 测试 体系 来 说 ,线性 脚本 的 缺点 也 比较 突出 : 

。 过 程 繁琐 。 产 生 可 行 的 自动 测试 包括 比较 的 时 间 比 手工 测试 要 长 2 一 10 信 。 

。 一 切 依赖 于 每 次 捕获 的 内 容 。 

。 测试 输入 和 比较 是 捆绑 在 脚本 中 的 。 

无 共享 或 重用 脚本 。 
线性 脚本 容易 受 软 件 变 化 的 影响 ,修改 代价 大 。 

。 如 果 回 放 脚 本 时 发 生 了 录制 脚本 时 没有 发 生 的 事情 , 则 可 导致 整个 测试 失败 。 

2) 结构 化 脚本 

类 似 于 结构 化 程序 设计 ,具有 各 种 逻辑 结构 ,包括 选择 性 结构 分支 结 构 、 循 环 迁 代 结 
构 ,而 且 具 有 函数 调用 功能 。 结 构 化 脚本 具有 很 好 的 可 重用 性 和 灵活 性 ,所 以 易于 维护 。 

所 有 的 测试 工具 脚本 语言 均 支 持 3 种 基本 结构 : 线性 结构 .选择 结构 和 迭代 结构 。 
选择 控制 结构 使 脚本 具有 判断 功能 。 最 普通 的 形式 是 if 语句 判断 条 件 为 真 或 假 。 例 如 ， 
脚本 检查 特定 消息 是 否 显示 在 屏幕 上 ,如 果 显 示 消 息 则 继续 执行 ,否则 停止 。 

和 迭代 结构 可 以 根据 需要 重复 一 个 或 多 个 指令 序列 ,和 编程 中 的 循环 结构 类 似 。 

除 控制 结构 外 ,一 个 脚本 还 可 以 调用 另 一 个 脚本 ,即将 一 个 脚本 的 控制 点 转 到 另 一 个 
脚本 的 开始 ,执行 完 后 再 将 控制 点 返回 到 前 一 个 脚本 。 这 种 机 制 可 以 将 较 大 的 脚本 分 为 
几 个 较 小 的 、 易 于 管理 的 脚本 。 

结构 化 脚本 的 主要 优点 是 健壮 性 好 ,可 以 对 一 些 容易 导致 测试 失败 的 特殊 情况 进行 
处 理 。 但 是 脚本 将 变 得 更 加 复杂 ,而 且 测 试 数据 仍 然 拥 绑 在 脚本 中 。 

3) 共享 脚本 

是 指 某 个 脚本 可 以 被 多 个 测试 用 例 使 用 , 即 脚 本 语言 允许 一 个 脚本 调用 另 一 个 脚本 。 
可 以 将 线性 脚本 转换 为 共享 脚本 。 

这 种 技术 的 思路 是 产生 一 个 执行 某 种 任务 的 脚本 ,而 不 同 的 测试 要 重复 这 个 任务 , 当 
要 执行 这 个 任务 时 只 需要 在 每 个 测试 用 例 的 适当 地 方 调用 这 个 脚本 。 这 样 带 来 两 个 好 
处 : 可 以 节省 生成 脚本 的 时 间 ; 当 重复 的 任务 发 生变 化 时 只 需要 修改 一 个 脚本 。 

有 两 种 共享 脚本 类 型 ,一 种 是 在 不 同 软件 应 用 系统 的 测试 之 间 共 享 脚本 , 另 一 种 是 在 
同 软件 应 用 系统 的 测试 之 间 共 享 脚 本 。 注 意 与 应 用 无 关 的 脚本 更 适合 长 期 的 测试 ,值得 
花费 精力 建立 共享 脚本 。 

共享 脚本 的 优点 如 下 : 

。 以 较 少 的 开销 实现 类 似 的 测试 。 

。 维护 开销 低 于 线性 脚本 。 

。 删除 了 明显 的 重复 。 

。 可 以 在 共享 脚本 中 增加 更 为 智能 的 功能 。 

共享 脚本 的 缺点 如 下 : 

。 需要 跟踪 更 多 的 脚本 文档 名 及 存储 ,如 果 管 理 得 不 好 ,很 难 找 出 适当 的 脚本 。 


331 


《软件 测试 技术 与 实践》 


。 对 于 每 个 测试 仍 需 要 一 个 特定 的 测试 脚本 ,因为 维护 成 本 比较 高 。 

。 共享 脚本 通常 是 针对 被 测 软 件 的 某 一 部 分 。 

共享 脚本 需要 文档 化 ,使 测试 者 清楚 每 个 脚本 的 功能 以 及 如 何 使 用 它们 。 软 件 文档 
常常 不 及 时 更 新 或 者 有 错误 。 如 果 将 这 些 问 题 带 到 了 脚本 的 文档 中 , 则 自动 化 测试 的 成 
本 就 更 高 。 解 决 这 个 问题 的 办 法 就 是 制定 脚本 编写 规范 。 

4) 数据 驱动 脚本 

将 测试 输入 存储 在 独立 的 数据 文件 中 ,而 不 是 存储 在 脚本 中 。 这 样 的 脚本 可 以 针对 
不 同 的 数据 输入 实现 多 个 测试 用 例 。 使 用 这 种 技术 ,可 以 用 较 小 的 额外 开销 实现 许多 测 
试用 例 。 因 为 需要 做 的 所 有 工作 只 是 为 每 个 增加 的 测试 用 例 制 定 一 个 新 的 输入 数据 集合 
和 期 望 结果 ,不 需要 编写 更 多 的 脚本 。 例 如 在 回归 测试 中 可 以 利用 数据 驱动 脚本 技术 增 
加 许多 测试 用 例 。 

数据 驱动 技术 的 主要 优点 是 数据 文件 的 格式 对 于 测试 者 而 言 易于 处 理 。 例 如 ,对 于 
复杂 一 些 的 脚本 ,数据 文件 中 可 以 包含 一 些 脚 本 运行 时 可 以 忽略 的 注释 ,使 得 数据 文件 更 
易于 理解 因而 易于 维护 。 另 一 种 方法 是 使 用 不 同 格式 说 明 测 试 输入 ,如 测试 者 常 使 用 电 
子 表格 软件 ,电子 表格 文件 为 主 文件 ,任何 修改 直接 对 电子 表格 而 不 是 数据 文件 。 每 次 修 
改 数据 文件 时 ,都 从 电子 表格 中 产生 。 

除 测试 输入 外 ,期 望 结 果 也 从 脚本 中 移出 而 放 到 数据 文件 中 ,每 个 期 望 结果 直接 与 特 
定 的 测试 输入 相关 联 。 因 此 ,如 果 输 入 在 数据 文件 中 ,其 比较 的 结果 也 必定 在 该 数据 文件 
中 。 许 多 测试 执行 工具 为 此 提供 一 种 机 制 ,捕获 屏幕 信息 ,并 将 其 作为 期 望 结果 与 测试 最 
新 产生 的 结果 进行 比较 。 

数据 驱动 的 优点 在 于 可 以 很 快 增加 类 似 的 测试 ,增加 新 的 测试 不 必 具 有 工具 脚本 语 
言 的 编程 知识 ,对 于 后 续 测 试 无 额外 的 脚本 维护 开销 。 其 缺点 在 于 初次 建立 的 开销 比较 
大 ,需要 专业 的 编程 人 员 了 予以 支持 ,同时 这 种 数据 驱动 方法 必须 易于 管理 ,否则 测试 质量 
将 不 易 保证 。 

5) 关键 字 驱 动 脚本 

关键 字 驱 动 脚本 是 数据 驱动 脚本 的 逻辑 扩展 。 数 据 驱 动 技 术 的 限制 来 自 于 每 个 测试 
用 例 执 行 的 导航 和 操作 必须 是 一 样 的 ,测试 的 逻辑 知识 建立 在 数据 文件 和 控制 脚本 中 , 因 
此 两 者 需要 同步 。 然 而 ,脚本 的 一 些 智能 活动 不 能 移 到 数据 文件 中 。 较 为 实际 的 方法 是 
允许 控制 脚本 支持 广泛 的 测试 用 例 , 而 这 增加 了 数据 文件 的 复杂 性 。 

关键 字 驱 动 技 术 与 数据 驱动 技术 相 结 合 , 将 数据 文件 变 为 测试 用 例 的 描述 ,用 一 系列 
关键 字 指 定 要 执行 的 任务 。 控 制 脚本 可 以 解释 关键 字 , 但 这 是 在 控制 脚本 之 外 完成 的 ,要 
求 一 个 附加 的 技术 实现 层 。 这 种 方式 的 实质 是 用 测试 文件 描述 测试 用 例 , 即 它 说 明 测 试 
用 例 做 什么 ,而 不 是 如 何 做 。 关 键 字 驱动 脚本 允许 使 用 描述 性 方法 ,只 需要 提供 测试 用 例 
的 描述 , 便 可 自动 生成 测试 用 例 , 就 像 为 有 经 验 的 测试 者 提供 描述 一 样 。 

描述 性 方法 是 将 被 测 软 件 的 知识 建立 在 自动 化 测试 环境 中 。 这 种 知识 包含 在 支持 脚 
本 中 : 他 们 了 解 被 测 软件 ,但 并 不 了 解 测试 用 例 , 因 此 可 以 独立 开发 测试 用 例 。 具 有 商业 
知识 和 测试 技能 的 人 可 以 将 精力 集中 在 测试 文件 上 ,而 具有 技术 知识 的 人 则 将 精力 集中 
在 支持 脚本 上 。 
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关键 字 驱 动 方法 的 优点 是 显而易见 的 。 通 常 这 种 方法 所 需 脚本 数量 是 随 软件 的 规模 
而 不 是 测试 的 数量 而 变化 的 。 因 此 ,可 以 不 用 增加 脚本 的 数量 而 实现 很 多 的 测试 ,只 需要 
替换 基本 的 应 用 支持 脚本 即 可 。 这 样 可 大 幅度 减少 脚本 维护 开销 ,并 可 加 速 自动 测试 的 
实现 ,而 且 可 以 由 不 会 编程 的 人 员 来 完成 测试 。 同 时 这 种 自动 测试 方法 可 以 用 与 工具 和 
平台 无 关 的 方法 来 实现 ,因此 如 果 改 变 了 测试 工具 ,也 不 会 有 失去 测试 用 例 的 风险 ,只 需 
要 重新 实现 支持 脚本 。 

可 以 使 用 测试 者 最 习惯 的 形式 和 工具 来 实现 测试 ,如 文本 编辑 器 .电子 表格 或 字 处 理 
软件 。 最 终 目标 是 提供 尽 可 能 简单 地 进行 测试 输入 的 方法 ,以 减少 不 必要 的 重复 和 琐碎 。 


15.4 测试 执行 自动 化 


通常 我 们 所 说 的 自动 化 测试 ,实际 上 是 指 测试 执行 和 比较 结果 的 自动 化 ,而 不 是 测试 
设计 或 测试 输入 生成 的 自动 化 。 


15.4.1 前 处 理 


在 大 多 数 测试 用 例 中 ,开始 测试 之 前 要 具备 一 些 先决 条 件 , 这 些 先 决 条 件 是 每 个 测试 
用 例 的 一 部 分 并 在 测试 之 前 实现 。 在 某 些 测试 用 例 中 ,先决 条 件 一 旦 建立 便 可 一 劳 永 逸 ， 
因为 它们 在 测试 过 程 中 不 会 改变 ;而 在 另 一 些 用 例 中 ,每 次 测试 执行 过 后 都 需要 进行 恢复 
工作 ,因为 先决 条 件 在 测试 过 程 中 发 生 了 变化 。 所 有 与 建立 和 恢复 这 些 测试 先决 条 件 相 
关 的 工作 就 是 前 处 理 。 


15.4.2 后 处 理 


测试 用 例 一 旦 执行 将 立即 产生 测试 结果 ,其 中 包括 测试 的 直接 产物 (当前 结果 ) 和 副 
产品 (如 工具 日 志文 件 ) ,涵盖 范围 可 能 很 广 ,因此 需要 对 这 些 产物 进行 处 理 , 以 评估 测试 
的 成 败 或 者 进行 内 务 处 理 。 

有 些 测试 结果 可 以 清除 ,而 有 一 些 需要 保留 。 要 保存 的 结果 应 该 存放 到 一 个 公共 的 
位 置 ,以 便 对 其 进行 分 析 或 只 是 为 了 防止 其 被 以 后 的 测试 改变 或 破坏 ,这 就 是 所 谓 的 后 
处 理 。 


15.4.3 自动 化 测试 过 程 


自动 化 测试 过 程 的 核心 内 容 是 执行 测试 用 例 。 由 于 自动 化 测试 是 执行 批量 的 测试 用 
例 , 保 证 自动 化 测试 的 连续 性 和 准确 性 很 重要 ,因此 要 进行 一 系列 的 前 期 准备 和 后 期 清理 
工作 。 这 些 前 处 理 和 后 处 理 任务 具有 以 下 一 些 典 型 特征 : 
。 数量 多 。 有 大 量 潜 在 的 前 处 理 和 后 处 理 任务 要 执行 ,其 中 一 部 分 需要 在 每 次 运行 
测试 用 例 时 都 执行 。 
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。 成 批 出 现 。 通 常会 有 许多 待 处 理 的 前 处 理 和 后 处 理 任务 在 同一 时 刻 出 现 。 
。 类 型 重复 。 在 某 个 特定 系统 上 进行 的 诸多 测试 只 需要 简单 的 物理 设置 ,因此 可 能 
只 存在 少数 几 种 不 同类 型 的 前 处 理 和 后 处 理 行为 。 不 同 测试 用 例 之 间 的 许多 变 
化 源 自 使 用 数据 的 不 同 。 
容易 自动 化 。 这 些 任务 通常 是 简单 的 函数 ,所 以 可 以 用 一 个 简单 的 指令 或 命令 来 
实现 ,许多 复杂 的 函数 可 以 缩减 成 用 一 个 命令 文件 就 可 以 执行 的 简单 命令 。 

有 了 自动 化 的 前 处 理 和 后 处 理 过 程 ,就 可 以 建立 一 个 完全 自动 化 的 测试 过 程 。 想 要 
达到 这 个 目标 ,必须 将 测试 过 程 中 所 有 需要 人 工 干 预 和 清理 的 工作 全 部 进行 自动 化 。 

图 15-2 展示 了 自动 化 辅助 手工 测试 过 程 和 自动 化 测试 过 程 的 区 别 。 在 自动 化 测试 
过 程 中 ,除了 选择 确定 要 执行 的 测试 用 例 和 分 析 失 败 原因 外 ,其 他 过 程 都 是 可 以 自动 化 开 
展 的 。 而 自动 化 辅助 的 手工 测试 过 程 中 ,设置 和 清除 测试 环境 这 些 任 务 都 是 手工 开展 的 ， 


这 意味 着 测试 用 例 无 法 连续 自动 运行 。 
自动 化 辅助 的 手工 测试 过 程 自动 化 测试 过 程 
进 择 /确定 要 拟 行 的 测试 用 例 选择 /确定 要 执行 的 测试 用 例 
* 设置 测试 环境 * 设置 测试 环境 
* 创建 测试 环境 * 创建 测试 环境 
， 装 载 测 试 数据 * 装载 测试 数据 


每 个 测试 用 例 重复 以 下 步骤 : 
* 建立 测试 先决 条 件 


每 个 测试 用 例 重复 以 下 步骤 : 


* 执行 

* 比较 结 

。 记 录 结 

* 分析 失败 原因 。 在 测试 用 例 结束 后 进行 清除 

。 故 障 报告 清除 测试 环境 

。 在 测试 用 例 结束 后 进行 清除 “删除 无 用 数据 
清除 测试 环境 * 保存 重要 数据 

“删除 无 用 数据 总 结 测试 结果 

。 保存 重要 数据 * 分 析 失 败 原因 
总 结 测试 结果 “故障 报告 

图 15-2 自动 化 测试 过 程 


15.5 测试 结果 比较 自动 化 
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比较 是 软件 测试 中 自动 化 程度 最 高 的 任务 ,也 常常 是 从 中 受益 最 多 的 任务 。 比 较 海 
量 数字 、 屏 幕 输出 或 任何 类 型 的 列表 并 不 是 人 类 非常 胜任 的 一 项 工作 ,这 种 工作 里 充斥 着 
重复 劳动 和 复杂 任务 ,但 却 是 计算 机 非常 理想 的 工作 内 容 。 如 果 仅 执行 自动 测试 ,而 不 进 
行 自动 比较 ,就 不 算是 自动 化 测试 。 

测试 验证 是 检验 软件 是 否 产生 了 正确 输出 的 过 程 ,是 通过 在 测试 的 实际 输出 与 预期 
输出 之 间 完 成 一 次 或 多 次 比较 来 实现 的 。 在 自动 测试 中 ,预期 输出 要 么 是 事先 准备 的 ,要 
么 是 测试 运行 过 程 中 捕获 的 实际 输出 。 在 后 一 种 情况 下 ,被 捕获 的 输出 必须 由 人 工 验 证 ， 
并 且 作为 以 后 自动 测试 运行 的 预期 输出 来 保存 。 


软件 测试 自动 化 


自动 比较 的 内 容 可 能 是 多 种 类 型 的 : 文本 信息 、 格 式 化 数据 .屏幕 输出 内 容 . 电 子 邮 
件 、 发 送 到 硬件 设备 的 数据 或 信和 号、 通过 网 络 发 送 到 其 他 机 器 和 进程 的 信息 .数据库 的 内 
容 等 ,需要 自动 测试 设计 者 在 面 对 实际 场景 时 根据 相应 测试 工具 的 支持 情况 来 设计 自动 
比较 机 制 。 

通常 被 称 为 “比较 器 "的 自动 比较 工具 是 检测 两 组 数据 异同 的 计算 机 程序 。 对 于 自动 
测试 而 言 ,这 两 组 数据 指 的 是 测试 运行 中 产生 的 输出 和 预期 的 输出 。 所 有 的 比较 器 基本 
上 都 能 告诉 用 户 两 组 比较 的 数据 是 否 相同 。 

当 测 试用 例 失败 后 ,必须 调查 失败 的 原因 。 人 们 常常 需要 比较 器 提供 额外 的 信息 来 
帮助 人 们 了 解 出 现 了 多 少 差异 及 其 差异 位 置 等 信息 。 较 为 先进 的 比较 器 可 以 辅助 用 户 浏 
览 这 些 差异 。 例 如 ,一 种 交互 式 功能 ,为 用 户 提供 了 并 排 观察 两 个 比较 文件 的 功能 。 在 这 
种 情况 下 ,可 以 用 某 种 方式 突出 差异 ,例如 粗 体 字样 或 不 同 颜色 等 。 在 比较 图 像 时 ,一 些 
比较 工具 可 以 用 不 同 的 图 形 处 理 技术 来 突出 差异 。 例 如 在 比较 两 个 位 图 图 像 的 地 方 ,可 
能 产生 第 三 个 图 像 , 即 从 一 个 图 像 中 减 去 另 一 个 图 像 的 结果 ,假如 第 一 个 和 第 二 个 图 像 相 
同 的 话 , 第 三 个 图 像 就 会 是 一 片 空白 。 一 些 文字 处 理 器 也 提供 了 比较 文本 文档 的 两 个 版 
本 这 一 功能 ,但 文字 处 理 器 可 能 并 没有 为 自动 测试 的 目的 而 制作 最 佳 的 比较 器 。 

但 是 需要 注意 的 是 ,比较 器 不 能 告诉 用 户 测试 是 否 失败 或 通过 。 比 较 器 可 以 告诉 用 
户 是 否 出 现 了 差异 。 当 比较 器 没有 发 现 意外 的 差异 时 ,测试 者 常 推断 测试 通过 。 当 发 现 
意外 的 差异 时 , 则 推断 出 测试 失败 的 结果 。 但 实际 上 ,这 并 非 一 定 正确 。 如 果 预 期 输出 实 
际 上 并 不 正确 ,那么 比较 结果 出 现 差 异 时 ,测试 者 仍 将 会 说 测试 通过 。 

自动 比较 可 能 没有 人 工 比较 灵活 。 当 人 工 执行 测试 时 ,测试 者 可 能 做 更 多 的 检验 操 
作 , 可 能 会 暴露 出 一 些 问题 ,而 这 些 问 题 甚至 使 用 最 严格 设计 的 特殊 比较 也 可 能 会 遗漏 。 
同时 自动 比较 只 能 做 到 将 实际 输出 和 预期 输出 进行 比较 , 若 预期 输出 中 有 错误 , 则 自动 比 
较 会 隐藏 这 个 错误 ,而 不 会 在 实际 输出 中 突出 这 一 错误 。 此 外 ,由 人 工 完成 的 回归 测试 更 
加 灵活 ,测试 者 根据 对 变化 的 理解 ,每 次 测试 可 以 进行 不 同 的 比较 ,而 自动 测试 一 旦 自动 
进行 , 则 每 次 都 以 相同 的 方式 精确 完成 相同 比较 。 如 果 需 要 任何 变化 , 则 必须 更 新 测试 
用 例 。 


15.5.1 动态 比较 


动态 比较 就 是 在 执行 测试 用 例 时 进行 的 比较 。 测 试 执行 工具 通常 包括 为 动态 比较 专 
门 设计 的 比较 器 功能 。 商 业 测试 执行 工具 的 动态 比较 功能 通常 都 很 出 色 , 特 别 是 那些 具 
备 捕获 重 放 功能 的 商业 测试 执行 工具 。 

最 好 使 动态 比较 按照 与 人 工 测试 者 基本 相同 的 方式 来 检验 出 现在 屏幕 上 的 内 容 , 这 
意味 着 可 以 检验 在 测试 用 例 运 行 期 间 屏幕 上 的 输出 ,尽管 这 些 输 出 随后 会 被 来 自 同一 测 
试用 例 的 后 续 输出 所 重 写 。 也 可 动态 比较 屏幕 上 不 可 见 的 输出 ,如 GUI 属性 等 。 

1) 支持 和 实现 工具 

动态 比较 指令 必须 插入 到 测试 脚本 中 ,这 些 指令 告诉 工具 进行 比较 的 时 间 和 比较 的 
内 容 。 大 多 数 工具 可 以 暂停 测试 用 例 的 记录 ,以 使 工具 可 保存 当前 版 本 作为 预期 输出 。 


335 


《软件 测试 技术 与 实践 》 


无 论 何 种 情况 ,工具 可 以 发 出 捕获 屏幕 或 窗口 的 特定 部 分 的 指令 ,保存 捕获 部 分 当前 的 事 
例 ,作为 预期 结果 。 无 论 何 时 重新 执行 脚本 ,工具 会 自动 加 入 指令 到 脚本 ,以 便 将 工具 捕 
获 相同 的 输出 与 作为 预期 输出 保存 的 内 容 进 行 比较 。 

测试 工具 一 般 不 允许 在 记录 脚本 时 加 入 检验 ,但 可 以 允许 在 重新 执行 脚本 的 时 候 插 
入 检验 测试 以 “ 慢 动作 ”的 方式 重新 执行 , 当 到 达 验 证 点 时 ,测试 者 首先 验证 屏幕 输出 是 否 
正确 。 如 果 该 输出 是 可 接受 的 ,工具 发 出 指令 捕获 相应 的 输出 作为 验证 数据 。 这 意味 着 
测试 的 第 一 次 是 记录 输入 ,第 二 次 是 记录 动态 比较 指令 。 

对 于 不 支持 这 些 方法 的 工具 ,自动 测试 器 必须 编辑 脚本 来 实现 动态 比较 。 

2) 测试 用 例 的 智能 化 

使 用 动态 比较 有 助 于 为 测试 用 例 融 入 一 些 智能 ,使 测试 用 例 根据 输出 采取 不 同 的 动 
作 。 例 如 ,如 果 出 现 意外 的 输出 , 则 说 明 测试 脚本 与 测试 的 软件 不 一 致 ,因此 最 好 异常 终 
止 测试 用 例 ,而 不 是 继续 执行 。 这 是 因为 当 没 有 获得 预期 输出 时 继续 执行 测试 用 例 是 很 
浪费 的 。 一 旦 测试 脚本 与 软件 不 一 致 ,任何 进一步 的 动作 都 是 无 意义 的 ,甚至 可 破坏 其 他 
测试 用 例 使 用 的 数据 。 

3) 复杂 性 和 维护 费用 成 正比 

因为 动态 比较 涉及 嵌入 更 多 的 命令 或 指令 到 测试 脚本 中 ,使 得 测试 脚本 更 加 复杂 。 
因此 ,使 用 许多 动态 比较 的 测试 用 例 需 要 花费 更 多 的 精力 来 创建 ,正确 编写 就 更 加 困难 
了 ,会 导致 更 高 的 维护 费用 。 

屏幕 输出 上 的 许多 表面 的 、 细 小 的 变化 可 以 造成 动态 比较 强调 许多 并 不 重要 的 差异 。 
虽然 在 这 种 情况 下 ,大 多 数 测试 执行 工具 可 容易 地 更 新 预期 输出 ,但 是 如 果 影 响 了 许多 比 
较 , 那 么 要 花费 相当 的 精力 和 时 间 来 进行 更 新 ,这 会 是 一 项 艰巨 的 工作 。 


15.5.2 执行 后 比较 


执行 后 比较 是 在 测试 用 例 运 行 后 执行 的 比较 。 执 行 后 比较 主要 用 于 比较 发 送 到 屏幕 
以 外 的 输出 ,例如 已 创建 的 文件 和 数据 库 更 新 过 的 内 容 。 

1) 支持 工具 

测试 执行 工具 通常 不 包括 对 这 种 比较 类 型 的 直接 支持 ,而 是 使 用 单独 的 一 个 或 多 个 
工具 。 例 如 ,可 以 使 用 标准 的 文件 比较 器 和 过 滤器 来 进行 执行 后 比较 ,这 有 助 于 提高 测试 
运行 的 性 能 并 可 实现 更 为 精确 的 比较 。 

2) 比较 顺序 和 结构 

动态 比较 是 在 出 现 输出 时 进行 ,而 执行 后 比较 与 之 不 同 。 执 行 后 比较 完成 的 比较 顺 
序 和 内 容 更 具备 可 选择 性 。 对 任何 一 个 测试 用 例 ,应 该 把 比较 分 成 两 个 或 更 多 的 组 ,只 在 
成 功 完成 了 第 一 组 比较 , 才 比 较 第 二 组 及 后 面 的 组 。 例 如 , 先 验证 大 体 的 结果 ,如 果 这 些 
结果 是 失败 的 , 则 把 时 间 花 费 在 详细 验证 这 些 结果 上 也 是 毫 无 意义 的 。 

3) 主动 与 被 动 的 执行 后 比较 

可 以 主动 地 或 被 动 地 进行 执行 后 比较 。 如 果 简 单 地 查看 测试 用 例 执行 后 碰巧 得 到 了 
什么 ,就 是 被 动 的 方法 。 如 果 在 运行 测试 用 例 时 ,有 意 保存 感 兴趣 的 特定 结果 ,以 后 为 了 
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特殊 的 目的 比较 它们 , 则 是 主动 的 执行 后 比较 方法 。 与 动态 比较 相 比 ,主动 的 执行 后 比较 
好 处 在 于 : 

。 保存 实际 输出 。 会 保留 测试 用 例 较 详尽 的 输出 记录 。 如 果 发 生 了 测试 用 例 失 败 ， 
这 些 记 录 提 供 了 非常 有 用 的 信息 ,可 能 为 以 后 的 审计 而 存档 。 
脱 机 比较 。 能 够 在 执行 完 所 有 的 测试 用 例 后 集中 进行 比较 ,执行 比较 的 机 器 可 以 
与 执行 测试 用 例 的 机 器 不 同 ,特别 是 测试 只 在 有 限 的 时 间 内 才能 使 用 机 器 资源 的 
情况 下 有 用 。 
可 使 用 不 同 的 比较 器 。 动 态 比较 的 效果 通常 受 测试 工具 性 能 的 限制 。 执 行 后 比 
较 可 运行 较为 复杂 的 比较 ,所 使 用 的 工具 和 技术 范围 更 加 广泛 。 
可 保存 其 他 输出 。 捕 获 测试 用 例 失败 时 出 现 的 额外 信息 是 非常 有 用 的 ,这 些 信息 
可 用 作 帮 助 分 析 错 误 原 因 。 

虽然 可 以 用 主动 的 执行 后 比较 代替 动态 比较 ,但 是 很 少 这 样 做 。 因 为 测试 执行 工具 
可 以 根据 结果 发 出 指令 ,采取 不 同 的 动作 ,所 以 一 般 来 说 ,在 测试 用 例 运行 过 程 中 一 旦 产 
生 输 出 就 进行 验证 ,要 优 于 在 测试 用 例 运 行 后 验证 输出 。 

4) 实现 执行 后 比较 

当 测 试用 例 需要 进行 一 种 或 多 种 执行 后 比较 时 ,通常 是 由 不 同 的 工具 来 执行 。 在 这 
种 情况 下 ,测试 执行 工具 不 自动 启用 执行 后 比较 器 ,而 要 用 户 来 运行 比较 器 。 

图 15-3 显示 了 执行 一 组 测试 用 例 所 必需 的 人 工 任务 和 自动 任务 。 这 看 上 去 不 像 是 
有 效率 的 自动 测试 。 如 果 测 试 执行 工具 负责 运行 比较 器 , 则 效率 会 提高 很 多 ,但 除非 用 户 
告诉 测试 执行 工具 去 运行 比较 器 以 及 如 何 去 做 。 事 实 上 ,用 户 必须 把 所 需 指 令 明 确 地 加 
入 到 测试 脚本 的 末尾 ,这 等 于 要 做 大 量 的 工作 。 但 可 以 使 用 共享 的 脚本 来 减少 工作 量 。 
通过 仔细 规划 存储 实际 输出 和 预期 输出 的 位 置 ,可 以 容易 地 按照 一 致 的 方式 定位 这 些 输 
出 ,以 简化 每 个 测试 脚本 的 额外 指令 。 


启动 测试 工具 选择 决定 测试 用 例 决定 执行 后 比较 
并 运行 测试 用 例 成 功 或 失败 运行 比较 器 成 功 或 失败 


人 工 任务 二 A ~ / 
上 且 仁 。 
侨务 运行 测试 用 例 执行 比较 
图 15-3 ”执行 测试 用 例 所 必需 的 人 工 任务 和 自动 任务 


甚至 在 加 入 了 完成 执行 后 比较 的 指令 后 ,也 不 可 能 解决 全 部 问题 ,图 15-4 显示 了 其 
中 的 原因 。 测 试 执行 工具 也 许 能 够 告诉 用 户 是 否 成 功 运行 了 测试 用 例 ,但 是 不 可 能 告诉 
用 户 执行 后 比较 的 详尽 结果 。 评 估 执 行 后 比较 的 结果 是 人 工 任务 。 用 户 必须 查看 以 下 两 


启动 测试 工具 选择 决定 测试 用 例 决定 执行 后 比较 
并 运行 测试 用 例 成 功 或 失败 成 功 或 失败 


运行 测试 用 例 (包括 任何 动态 比较 和 执行 后 比较 ) 
图 15-4 人 工 评估 执行 后 比较 的 结果 
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方面 的 信息 ,以 决定 测试 用 例 运行 的 最 终 状 态 : 测试 执行 工具 的 日 志 或 总 结 报告 ,还 有 来 
自 比 较 器 的 输出 。 

用 户 希 望 得 到 每 个 测试 用 例 的 全 部 状态 ,也 就 是 说 测试 是 否 成 功 ,因此 增加 测试 脚本 
以 理解 比较 的 结果 并 返回 全 面 的 测试 用 例 状态 是 非常 重要 和 关键 的 。 


15.6 测试 工具 的 选择 


软件 测试 工具 可 以 从 两 个 不 同 的 方面 去 分 类 。 

。 根据 测试 方法 的 不 同 ,分 为 白 盒 测 试 工具 和 黑 盒 测 试 工具 。 

。 根据 测试 的 对 象 和 目的 ,分 为 单元 测试 工具 、 功 能 测试 工具 、` 负 载 测试 工具 、 性 能 
测试 工具 和 测试 管理 工具 等 。 


15.6.1 白 盒 测试 工具 


白 盒 测试 工具 是 针对 程序 代码 ,程序 结构 ,对象 属 性 、 类 层次 等 进行 测试 ,测试 中 发 现 
的 缺陷 可 以 定位 到 代码 行 、 对 象 或 变量 级 。 根 据 测试 工具 原理 的 不 同 ,又 可 分 为 静态 测试 
工具 和 动态 测试 工具 。 单 元 测试 工具 多 属于 白 盒 测试 工具 。 

。 静 态 测试 工具 对 代码 进行 语法 扫描 , 找 出 不 符合 编码 规范 的 地 方 , 根 据 某 种 质量 模 
型 评价 代码 的 质量 ,生成 系统 的 调用 关系 图 等 。 静 态 测 试 工具 直接 对 代码 进行 分 
析 , 不 需要 运行 代码 ,也 不 需要 对 代码 编译 连接 和 生成 可 执行 文件 ,其 代表 有 
Telelogic 公司 的 Logicscope 软件 .PR 公司 的 PRQA 软件 。 

。 动态 测试 工具 需要 实际 运行 被 测试 系统 ,并 设置 探 针 , 向 代码 生成 的 可 执行 文件 
中 插入 一 些 监 测 代码 ,掌握 执行 到 控 针 处 程序 运行 数据 (对 象 属性 和 变量 的 值 等 ) 。 
动态 测试 工具 的 代表 有 Compuware 公司 的 DevPartner 软件 , Rational 公司 的 
Purify 系列 以 及 北京 航空 航天 大 学 软件 工程 研究 所 的 QESat 等 。 


15.6.2 黑 盒 测 试 工具 


黑 盒 测试 工具 适用 于 系统 功能 测试 和 性 能 测试 ,包括 功能 测试 工具 、 负 载 测试 工具 、 
性 能 测试 工具 等 。 黑 盒 测试 工具 的 一 般 原理 是 利用 脚本 的 录制 回放 以 模拟 用 户 的 操作 ， 
然后 将 被 测 系 统 的 输出 记录 下 来 并 与 预先 给 出 的 标准 结果 比较 。 黑 盒 测 试 工具 可 以 大 大 
减轻 黑 盒 测 试 的 工作 量 ,在 迭代 开发 的 过 程 中 ,能 够 很 好 地 进行 回归 测试 。 

黑 盒 测 试 工具 的 代表 有 Rational 公司 的 TeamTest、Robot, Compuware 公司 的 
QACenter。 另 外 , 专用 于 性 能 测试 的 工具 包括 原 Mercury Interactive 公司 的 
LoadRunner、RadView 公司 的 WebLoad 和 Microsoft 公司 的 WebStress 等 工具 。 

除了 上 述 测试 工具 外 ,还 有 测试 管理 工具 及 其 他 一 些 专用 工具 。 测 试管 理工 具 负 责 
对 测试 计划 ,测试 用 例 和 测试 实施 进行 管理 ,并 对 产品 缺陷 进行 跟踪 管理 和 对 产品 特性 进 
行 管理 等 。 测 试管 理工 具 的 代表 产品 有 Rational 公司 的 TestManager、Compuware 公司 
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的 TrackRecord、 北 京 航空 航天 大 学 软件 工程 研究 所 的 QESuite 系列 等 。 
15.6.3 选择 测试 工具 
测试 工具 的 选择 是 自动 化 测试 的 重要 步骤 之 一 。 对 测试 工具 的 选择 必须 有 一 个 全 盘 


的 长 期 考虑 ,分 阶段 逐步 引入 测试 工具 。 图 15-5 展示 了 一 个 选择 测试 工具 的 流程 。 


时 间 表 
工具 软件 市 场 


| [和 
了 
h 
定义 问题 f 候选 | |， 


测试 自动 化 的 确定 自动 评估 
解决 方案 的 需求 上 -| 演示 
工具 供应 商 ”约束 局 检 验 


图 15-5 自动 化 测试 工具 选择 流程 


下 面 以 功能 测试 工具 为 例 ,说 明 自 动 化 测试 所 特有 的 功能 需求 和 关键 特征 ,这 也 是 选 
择 测 试 工具 最 关键 的 内 容 之 一 。 

1) 支持 脚本 语言 

这 是 最 基本 的 要 求 ,脚本 语言 具有 与 常用 编程 语言 类 似 的 语法 结构 ,可 以 对 已 录制 的 
脚本 进行 编辑 修改 。 具 体 来 讲 , 脚 本 语言 至 少 应 该 : 支持 多 种 常用 的 变量 和 数据 类 型 ; 支 
持 各 种 条 件 逮 辑 、 循 环 结构 ;支持 函数 的 创建 和 调用 。 

如 果 所 使 用 的 脚本 语言 和 通用 语言 如 Visual Basic、C 等 比较 接近 或 一 致 ,自动 化 测 
试 就 成 功 了 一 半 。 脚 本 语言 的 功能 越 强大 ,就 越 能 为 测试 开发 人 员 提 供 更 灵活 的 使 用 空 
间 , 而 且 具 备 一 个 良好 的 、 类 似 于 C 语言 的 脚本 语言 结构 也 是 很 重要 的 , 它 会 大 大 减少 测 
试 脚本 的 维护 工作 量 。 总 之 ,要 确认 脚本 语言 的 功能 是 否 可 以 满足 测试 的 实际 需求 。 

2) 脚本 语言 是 否 支持 外 部 函数 库 、 函 数 的 可 重用 

如 果 支 持 函 数 调用 ,就 可 以 建立 一 套 比较 通用 的 函数 库 。 一 旦 程序 做 了 修改 ,只 需 对 
原 脚本 中 的 相应 函数 进行 更 改 , 而 不 用 改动 所 有 可 能 的 脚本 ,从 而 可 以 节省 大 量 工作 。 如 
果 这 种 函数 调用 比较 容易 通过 函数 间 的 参数 传递 来 实现 ,例如 ,对 于 用 户 登录 函数 ,每 次 
调用 时 可 能 都 需要 使 用 不 同 的 用 户 名 和 口令 ,此 时 就 必须 通过 参数 的 传递 将 相关 信息 在 
函数 内 部 执行 。 

除了 针对 被 测 系 统 建立 库 函 数 外 ,一 些 外 部 函数 同样 能 够 为 测试 提供 强大 的 功能 ,如 
Windows 程序 中 对 DLL 文件 的 访问 、 客 户 机 /服务 器 (C/S) 程 序 中 对 数据 库 编程 接口 的 
调用 等 。 如 果 能 够 通过 命令 行 方 式 运行 测试 脚本 ,可 以 为 测试 的 执行 带 来 更 大 的 灵活 性 ， 
这 样 程序 生成 后 就 可 以 自动 启动 测试 脚本 ,并 且 可 以 向 一 组 机 器 发 布 指令 ,让 它们 同时 运 
行 不 同 的 测试 脚本 。 
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3) 对 程序 界面 中 对 象 的 识别 能 力 
测试 工具 必须 能 够 将 程序 界面 中 的 相应 对 象 区 分 并 识别 出 来 ,录制 的 测试 脚本 才 具 
有 和 良好 的 可 读 性 、 修 改 的 灵活 性 和 维护 的 方便 性 。 如 果 只 支持 通过 位 置 坐标 来 区 分 对 象 ， 
问题 就 会 比较 多 ,程序 界面 稍 做 改变 将 导致 原 有 测试 脚本 无 法 继续 使 用 。 
对 于 用 一 些 比较 通用 的 开发 工具 写 的 程序 ,多 数 测试 工具 都 能 区 分 和 标志 出 程序 界 
面 中 的 所 有 元 素 。 因 此 ,在 选择 测试 工具 时 ,对 开发 语言 的 支持 也 是 很 重要 的 。 当 然 程 序 
难免 会 存在 一 些 确 实 比 较 难于 标识 的 对 象 ,如 位 图 对 象 等 ,而 这 些 对 象 在 程序 中 可 能 还 要 
完成 一 些 功能 或 者 执行 相应 的 操作 ,那么 这 些 可 能 出 现 的 问题 在 产品 设计 阶段 就 应 该 考 
虑 。 软 件 开 发 和 测试 要 相互 照应 ,一 方面 要 实现 软件 必须 实现 的 功能 ,还 要 保证 软件 的 可 
测试 性 ,为 了 在 功能 的 灵活 性 和 可 测试 性 之 间 达 到 平衡 ,有 时 会 采取 折 中 处 理 方法 。 
4) 抽象 层 
抽象 层 和 对 象 识别 能 力 有 一 定 的 关系 。 在 解决 捕 提 回放 过 程 中 ,针对 程序 界面 存在 
的 问题 在 被 测 应 用 程序 和 录制 生成 的 测试 脚本 之 间 增 加 一 个 抽象 层 。 
抽象 层 用 于 将 程序 界面 中 存在 的 所 有 对 象 实体 映射 为 逻辑 对 象 ,测试 就 可 以 针对 这 
些 逻辑 对 象 进行 ,而 不 需要 依赖 于 界面 元 素 的 变化 ,以 减少 测试 脚本 建立 和 维护 的 工 
作 量 。 
5) 分 布 式 测试 的 网 络 支持 
一 些 网 上 应 用 软件 ,如 网 上 会 议 系 统 、 远 程 培 训 系 统 、 聊 天 系统 等 ,一 般 用 于 协同 工 
作 、 相 互通 信 等 模式 中 ,支持 多 用 户 来 共同 操作 软件 ,这 时 对 软件 自动 化 测试 有 更 高 的 要 
求 ,包括 : 
。 测试 工具 进行 测试 时 自身 传输 的 数据 量 很 小 .具有 很 强 的 独立 性 ,对 被 测 软件 影 
响 很 小 。 
。 能 按照 事先 设置 的 任务 执行 时 间 表 进 行 , 即 在 指定 时 间 、 指 定 设 备 上 执行 指定 的 
测试 任务 。 或 者 按照 任务 设 定 的 先后 次 序 、. 相 互 的 依赖 性 进行 。 如 一 个 用 户 要 加 
入 网 络 会 议 , 只 能 在 某 个 用 户 已 经 启动 一 个 网 络 会 议 之 后 进行 。Rational Robot 
就 有 这 样 的 功能 。 
。 当 两 个 测试 任务 要 同时 打开 一 个 文件 时 ,要 能 保持 协调 或 协同 处 理 , 避 人 免 出 现 资 
源 竞 争 。 
6) 支持 数据 驱动 测试 
测试 工具 能 够 支持 对 流行 的 数据 库 (Oracle、SQL Server、MySQL、Access 等 ) 格 式 文 
件 的 操作 ,这 样 有 利于 测试 脚本 的 代码 和 数据 输入 分 离 ,减少 代码 的 编程 和 维护 工作 量 ， 
也 有 利于 测试 用 例 的 扩充 和 完善 。 在 数据 驱动 测试 中 ,测试 脚本 通过 从 事先 准备 的 数据 
库 或 文件 中 读 取 数 据 , 在 执行 测试 过 程 中 将 结果 数据 写 入 数据 库 或 文件 中 ,或 直接 将 结果 
和 事先 保存 在 数据 库 中 的 预期 结果 值 进行 比较 。 
7) 具有 脚本 开发 良好 的 环境 
对 于 可 以 自动 执行 的 测试 任务 ,通常 会 在 上 班 时 间 将 任务 制定 好 ,下 班 后 启动 任务 执 
行 ,第 二 天 上 班 再 来 检查 测试 执行 的 结果 。 但 是 经 常会 出 现 本 来 需要 整 晚 执行 的 工作 ,第 
二 天 发 现 才 执行 了 5 分 钟 就 因为 程序 的 一 些 异常 错误 而 终止 了 ,而 且 这 种 情况 经 常 发 生 。 
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因此 ,测试 工具 应 有 相对 应 的 容错 处 理 系统 ,可 以 自动 处 理 一 些 异 常情 况 而 对 系统 进行 复 

位 ,或 者 允许 用 户 设计 是 否 可 以 跳 过 某 些 错误 ,然后 继续 执行 下 面 的 任务 。 

其 次 ,能 提供 类 似 软件 集成 开发 环境 中 的 调试 功能 ,支持 脚本 单 步 运行 .设置 断 点 、 得 

到 变量 返回 结果 等 ,可 以 更 有 效 地 对 测试 脚本 的 执行 进行 跟踪 检查 并 迅速 定位 问题 。 

最 后 ,测试 脚本 的 开发 也 经 常 是 多 个 测试 工程 师 共 同 工 作 ,需要 一 个 团队 的 开发 环 

境 ,对 脚本 代码 能 很 好 控制 和 管理 ,也 可 以 对 测试 数据 文件 ,测试 脚本 对 象 抽象 层 进行 统 

一 管理 。 这 一 点 对 大 型 测试 项 目 尤 其 重要 ,有 利于 自动 化 测试 管理 ,缩短 测试 开发 周期 并 

减少 测试 脚本 的 错误 。 

此 外 ,其 他 一 些 功 能 包括 : 

。 图 表 功 能 。 测 试 工具 生成 的 结果 可 以 通过 一 些 统计 图 表 来 表示 ,这 样 会 直观 些 。 
软件 问题 最 终 要 由 人 进行 解释 ,而 且 查看 最 终 报告 的 人 员 不 一 定 对 测试 很 熟悉 ， 
因此 测试 工作 能 否 生成 结果 报表 ,能 够 以 什么 形式 提供 报表 是 需要 考虑 的 因素 。 

。 测试 工具 的 集成 能 力 。 测 试 工具 的 引入 是 一 个 长 期 的 过 程 , 应 该 是 伴随 着 测试 过 
程 改进 而 进行 的 一 个 持续 的 过 程 。 因 此 ,测试 工具 的 集成 能 力也 是 必须 考虑 的 因 
素 , 包 括 两 个 方面 的 意思 : 首先 ,能 够 和 开发 工具 进行 良好 集成 ,其 次 ,能 够 和 其 
他 测试 工具 进行 良好 集成 。 

。 操作 系统 和 开发 工具 的 兼容 性 。 测 试 工具 可 和 否 跨 平 台 , 是 否 适用 于 公司 目前 使 用 
的 开发 工具 ,这 些 问题 也 是 在 选择 一 个 测试 工具 时 必须 考虑 的 问题 。 


15.7 测试 工具 的 主流 产品 


软件 自动 化 测试 实现 的 基础 是 可 以 通过 设计 特殊 的 程序 来 模拟 测试 人 员 对 计算 机 的 
操作 过 程 、 操 作 行为 ,或 者 类 似 于 编译 系统 那样 对 计算 机 程序 进行 检查 ,实现 的 方法 主要 
有 代码 的 静态 和 动态 分 析 、 测 试 过 程 的 捕获 和 回放 、 测 试 脚本 技术 .虚拟 用 户 技术 和 测试 
管理 技术 。 


15.7.1 面向 开发 的 单元 测试 工具 


单元 测试 一 般 采 用 白 盒 测试 方法 ,要 根据 程序 内 部 的 实现 来 完成 测试 ,所 以 必须 和 特 
定 的 语言 结合 起 来 进行 。 针 对 语言 的 不 同 ,单元 测试 工具 也 不 同 。 而 且 一 些 开 发 环境 ,如 
Microsoft Visual Studio 和 Borland 公司 的 JBuilder 都 含有 单元 测试 工具 软件 。 单 元 测 
试 工具 可 以 依据 不 同 的 语言 进行 分 类 : 

。 功能 强大 的 自动 化 C/C++ 单元 级 测试 工具 Panorama C++ C++ Test、Numega。 

。JUnit 是 一 个 开发 源 代码 的 Java 测试 框架 ,用 于 编写 和 运行 可 重复 的 测试 。 

还 可 以 根据 工具 的 功能 特点 进行 分 类 ,如 : 

。 内 存 资源 泄漏 检查 工具 。Numega 中 的 BounceChecker、Rational 的 Purify 等 。 

。 代码 覆盖 率 检查 工具 。Numega 的 TrneCoverage、 Rational 的 PureCoverage、 

TeleLogic 公司 的 LogiScope。 
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。 代码 性 能 检查 工具 。LogiScope 的 Macabe。 

。 软件 纠 错 工 具 。Rational Purl 等 。 

其 中 ,Parasoft 公司 的 C++ Test 是 一 个 功能 强大 的 自动 化 C/C++ 单元 级 测试 工具 ， 
可 以 自动 测试 任何 C/C++ 函数 、 类 ,可 自动 生成 测试 用 例 、 测 试 驱 动 函 数 或 桩 函数 ,在 自 
动 化 的 环境 下 完成 单元 测试 。 其 单元 级 的 测试 覆盖 率 可 以 达到 100%。C++ Test 能 够 
自动 检查 测试 代码 构造 测试 代码 的 功能 性 和 维护 代码 的 完整 性 。 具 有 的 特性 有 : 即时 
测试 类 /函数 ;支持 极限 编程 模式 下 的 代码 测试 ;自动 建立 类 /函数 的 测试 驱动 程序 和 桩 调 
用 ;自动 建立 和 执行 类 /函数 的 测试 用 例 ;提供 快速 加 入 、 执 行 说 明和 功能 性 测试 的 框架 ; 
执行 自动 回归 测试 和 组 件 测试 。 


15.7.2 负载 和 性 能 测试 工具 


负载 和 性 能 测试 工具 在 软件 自动 化 测试 中 占据 着 很 重要 的 位 置 。 因 为 负载 和 性 能 测 
试 是 软件 手工 测试 的 弱项 ,但 却 是 工具 的 强项 。 优秀 产品 主要 有 原 MI 公司 的 
LoadRunner、Compuware 的 QALoad、Rational 公司 的 SQA Load、Performance 和 Visual 
Qualitify。 


15.7.3 GUI 功能 测试 工具 


基于 GUI 的 功能 测试 工具 在 软件 自动 化 测试 中 占有 重要 的 地 位 。 其 基本 原理 是 : 
将 操作 应 用 程序 的 各 种 动作 和 输入 记录 下 来 ,包括 键盘 操作 、 鼠 标 单 击 等 ,生成 一 个 脚本 
文件 。 这 个 脚本 以 后 可 以 被 回放 ,也 就 是 能 重复 上 一 次 操作 的 动作 ,实现 自动 运行 和 测 
试 。 在 实际 测试 过 程 中 ,还 要 根据 测试 需求 对 录制 的 脚本 进行 一 些 必 要 的 修改 或 参数 添 
加 ,如 选择 不 同 的 测试 数据 ,脚本 中 插入 检查 点 进行 跟踪 调试 等 。 

一 般 来 说 ,GUI 功能 测试 工具 的 测试 过 程 包含 下 列 5 个 步骤 : 

(1) 录制 测试 脚本 。 利 用 测试 工具 的 录制 功能 ,将 测试 人 员 的 操作 记录 下 来 ,并 转化 
成 相应 的 测试 脚本 。 

(2) 编辑 测试 脚本 。 直 接 录 制 下 来 的 测试 脚本 ,一 般 不 能 直接 使 用 ,需要 修改 ,如 插 
入 验证 点 、 调 整 测试 的 节奏 、 添 加 注释 等 。 

(3) 调试 测试 脚本 。 经 过 调试 ,确保 执行 效果 满足 测试 用 例 所 描述 的 要 求 。 

(4) 执行 。 在 测试 机 上 运行 测试 脚本 ,完成 事先 计划 的 测试 任务 。 

(5) 分 析 测 试 结果 。 包 括 图 表 显 示 、 统 计 分 析 。 

基于 GUI 的 功能 测试 工具 主要 适合 回归 测试 阶段 。 当 一 个 应 用 开发 基本 完成 后 , 程 
序 界面 基本 定型 ,虽然 业务 的 需求 会 频繁 变化 ,但 测试 脚本 的 结构 基本 不 需要 改动 ,只 需 
要 做 些小 调整 就 可 以 自动 运行 ,可 大 大 提高 测试 的 效率 和 测试 的 准确 性 。 

GUI 功能 测试 工具 的 主要 产品 有 原 MI 公司 的 WinRunner、Compuware 公司 的 
QARun、Rational 公司 的 SQA Robot 和 Microsoft 的 Visual Test Suite 等 。 
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15.7.4 ”Web 应 用 测试 工具 


基于 Web 应 用 的 测试 工具 主要 进行 链接 检查 .HTML 检查 、Web 功能 和 Web 站 点 
安全 性 等 各 个 方面 的 测试 。 主 要 的 Web 测试 工具 有 原 MI 公司 的 Astra 系列 和 RSW 公 
司 的 E-TestSuite, Web 系统 测试 工具 有 WorkBench、Web Application Stress (WAS) 
Tool \ 页 面 链接 测试 工具 Link Sleuth。 

1) Web Application Stress Tool 

微软 的 WAS 允许 以 不 同 的 方式 创建 测试 脚本 ,可 以 通过 使 用 浏览 器 遍历 站 点 来 录 
制 脚本 ,也 可 以 从 服务 器 的 日 志文 件 导 入 URL, 或 者 从 一 个 网 络 内 容 文件 夹 选择 一 个 文 
件 。 当 然 ,也 可 以 手工 输入 URL 来 创建 一 个 新 的 测试 脚本 。 

WAS 可 以 使 用 任何 数量 的 客户 端 运行 测试 脚本 ,全 部 都 由 一 个 中 央 主 客户 端 来 控 
制 。 在 每 一 个 测试 开始 前 ,主客 户 机 透明 地 执行 以 下 任务 : 与 其 他 所 有 客户 机 通信 ;把 测 
试 数据 分 发 给 所 有 客户 端 ; 在 所 有 客户 端 同 时 初始 化 测试 ;从 所 有 的 客户 端 收集 测试 结果 
和 报告 。 这 个 特性 非常 重要 ,尤其 对 于 要 测试 一 个 拥有 大 量 客户 端的 服务 器 集群 的 最 大 
吞吐 量 时 非常 有 用 。 除 此 之 外 ,WAS 可 用 来 模拟 Web 浏览 器 向 任何 采用 HTTP 1.0 或 
1. 1 标准 的 服务 器 发 送 请 求 ,而 不 考虑 服务 器 运行 的 平台 。 除 了 易 用 性 外 ,WAS 还 有 如 
下 的 特性 。 

。 对 于 需要 署名 登录 的 网 站 ,允许 创建 用 户 账号 。 
允许 为 每 个 用 户 存 储 Cookies 和 Active Server Pages 的 会 话 信 息 。 
支持 随机 的 或 顺序 的 数据 集 。 
支持 带宽 调节 和 随机 延迟 ,以 便 更 真实 地 模拟 显示 情形 。 
支持 SSL 协议 。 
允许 URL 分 组 和 对 每 组 的 点 击 率 的 说 明 。 
提供 一 个 对 象 模型 ,可 以 通过 VBScript 处 理 或 者 通过 定制 编程 来 达到 启动 .结束 
和 配置 测试 脚本 的 效果 。 

2) WebKing 

Parasoft 公司 的 WebKing 是 一 个 独特 的 工具 ,用 以 帮助 开发 人 员 防 止 和 检测 多 层次 
Web 应 用 中 的 错误 。WebKing 采用 已 经 证 明 能 够 有 效 改善 C++ 和 Java 代码 质量 的 测试 
技术 ,可 以 自动 进行 白 盒 . 黑 盒 和 回归 测试 .以 及 网 盒 测 试 一 一 一 种 全 新 的 针对 动态 网 页 
的 单元 测试 方法 。 

。 WebKing 的 白 盒 测 试用 例 对 表格 对 象 自 动 生成 一 组 用 户 输入 ,然后 显示 生成 的 
目录 和 动态 网 页 ,分 析 网 站 的 结构 ,找到 测试 的 最 佳 路 径 。 简 单单 击 “Test All” 按 
钮 ,WebKing 将 自动 测试 每 一 个 静态 和 动态 网 页 ,并 发 现 其 中 的 构造 错误 。 同 时 
WebKing 的 CodeWizard 功能 执行 最 重要 的 HTML、CSS 和 JavaScript 编码 标准 
检查 ,WebKing 还 检查 所 有 的 链接 。 

WebKing 执行 黑 盒 测试 以 保证 网 站 应 用 能 够 满足 功能 要 求 。WebKing 的 路 径 视 
图 显示 所 有 潜在 的 路 径 ,包括 一 组 默认 的 路 径 。 可 以 建立 自己 的 测试 用 例 以 测试 
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特定 的 路 径 。 
独 有 的 RuleWizard 特性 让 用 户 使 用 图 形 脚本 语言 建立 监视 动态 网 页 内 容 的 规 
则 。 虽 然 某 些 动态 网 页 的 内 容 依 赖 于 用 户 输入 ,RuleWizard 标识 出 不 变 的 部 分 。 
CodeWizard 自动 执行 这 些 规则 以 保证 动态 网 页 能 够 符合 设计 要 求 。 
网 盒 测试 是 为 Web 应 用 而 特别 设计 的 创新 技术 ,能 自动 化 修改 、 编 译 、 分 发 和 测 
试 网 站 等 生命 周期 活动 ,帮助 用 户 建设 一 个 发 布 和 测试 每 个 程序 或 脚本 语言 的 基 
础 结构 。 当 每 次 修改 网 站 时 ,WebKing 能 够 自动 执行 回归 测试 , 若 发 现 问题 ,会 
取消 发 布 内 容 。 当 发 布 时 , WebKing 自动 显示 动态 页 、 验 证 页 面 的 准确 性 。 同 时 
检查 链接 .HTML CSS 和 JavaScript。 
WebKing 的 特性 如 下 : 
。 防止 和 检测 动态 网 站 中 的 错误 。 
。 测试 一 个 动态 网 站 中 所 有 可 能 的 路 径 。 
。 强化 HTML、CSS 和 JavaScript 的 编程 标准 。 
帮助 建立 自动 监视 动态 页 面 内 容 的 规则 。 
检查 中 断 的 链 和 孤立 的 文件 。 
防止 有 错误 的 页 面 。 
记录 有 关 网 站 使 用 的 各 类 文件 统计 信息 。 
集成 各 类 插件 和 第 三 方 工 具 。 

。 发 布 网 站 时 自动 执行 基本 命令 。 

3) SOAPTest 

Parasoft 公司 的 SOAPTest 是 一 个 测试 Web 服务 程序 的 工具 。 通 过 WSDL 自动 创 
建 的 测试 套件 ,SOAPTest 使 Web 服务 的 功能 测试 易于 实现 。 用 于 服务 功能 的 测试 套件 
同样 适用 于 负载 测试 ,不 但 可 以 测试 Web 服务 对 并 发 请 求 的 响应 ,而 且 可 以 确认 测试 负 
载 是 否 导 致 功能 问题 。 可 以 让 SOAPTest 模拟 服务 组 件 接受 客户 发 送 的 适当 请 求 , 也 可 
以 把 SOAPTest 当 作 一 个 代理 服务 器 ,显示 Web 服务 器 和 客户 之 间 的 消息 。 

SOAPTest 的 特性 如 下 : 

。 彻底 测试 SOAP 协议 和 Web 服务 方面 的 问题 。 

。 从 WSDL 文档 中 自动 创建 测试 套件 并 用 于 客户 端 和 服务 器 端 测试 。 

。 自动 Web 服务 程序 功能 测试 .负载 测试 和 客户 测试 。 

。 使 用 XSLT 到 SOAP 消息 实现 客户 端 和 服务 器 端的 正确 事务 。 


15.7.5 嵌入 式 测试 工具 


嵌入 式 系统 软件 的 测试 相对 困难 ,因为 它 的 开发 是 用 交叉 编译 方式 进行 的 。 在 目标 
机 (Target) 上 不 可 能 有 多 余 的 空间 记录 测试 的 信息 ,必须 实时 地 将 测试 信息 通过 网 线 / 串 
口传 到 宿主 机 (Host) 上 ,并 实时 在 线 地 显示 。 因 此 ,对 源 代码 的 插 装 和 目标 机 上 的 信息 
收集 与 回 传 成 为 嵌入 式 测 试 工 具 要 解决 的 关键 问题 。 

。 CodeTest 是 Applied Microsystems 公司 的 产品 ,是 广泛 应 用 的 嵌入 式 软件 联机 
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测试 工具 。CodeTest 为 追踪 嵌入 式 应 用 程序 、 分 析 软 件 性 能 测试 软 件 的 覆盖 率 
和 内 存 动态 分 配 等 提供 了 一 个 实时 联机 的 高 效 解决 方案 。CodeTest 还 是 一 个 可 
共享 的 网 络 工具 ,为 整个 开发 和 测试 团队 带 来 高 品质 的 测试 手段 。CodeTest 支 
持 所 有 的 16/32 位 CPU 和 MCU ,支持 总 线 频率 高 达 100MHz, 可 通过 PCI/VME 
总 线 .MICTOR 插头 对 嵌入 式 系 统 进行 联机 测试 ,无 须 改 动用 户 的 PCB, 与 用 户 
系统 连接 方便 。 

GammaRay 系列 产品 主要 包括 软件 逻辑 分 析 仪 GammaPfiler, 可靠 性 评测 工具 
GammaRET 等 。 

Logiscope 是 Telelogic 公司 的 工具 套件 ,贯穿 于 软件 开发 ,代码 评审 、 单 元 测试 、 
集成 测试 、 系 统 测试 以 及 软件 维护 阶段 ,用 于 代码 分 析 、 软 件 测试 和 覆盖 测试 。 
LynxInsure 十 十 是 Lynx Real-Timesystems 公司 的 产品 ,基于 LynxOS 的 应 用 代 
码 检测 与 分 析 测 试 工 具 。 主 要 包括 3 个 工具 : 源码 检测 工具 Insure 十 十 ,可 检查 
初级 错误 .API 应 用 中 的 类 型 和 参数 错误 .指针 和 数组 错误 .字符 串 操 作 错 误 ; 内 
存 检 测 工具 Inuse, 可 查找 内 存 漏 洞 、 检 查 动 态 内 存 的 分 配 等 :程序 的 覆盖 度量 工 
具 TCA, 可 提供 完全 的 覆盖 报告 。 

MessageMaster 是 Elvior 公司 的 产品 。 它 是 测试 嵌入 式 软件 系统 工具 ,向 环境 提 
供 基于 消息 的 接口 。 

VectorCAST 是 Vector Software 公司 产品 。 该 产品 由 6 个 集成 的 部 件 组 成 ,可 自 
动 生成 测试 代码 ,为 主机 和 嵌入 式 环境 构造 可 执行 的 测试 架构 。VectorCAST 测 
试 系统 由 环境 生成 器 测试 用 例 生成 器 .运行 控制 器 .报告 生成 器 动态 分 析 器 和 
静态 分 析 器 等 组 件 组 成 。 使 用 VectorCAST 测试 系统 ,可 以 保持 经 常 更 新 部 件 仿 
真 模型 。 

IBM Rational Test RealTime(RTRT) 帮 助 开发 人 员 创 建 测试 脚本 执行 测试 用 
例 和 生成 测试 报告 ,包括 代码 覆盖 分 析 报告 ,内存 分 析 报 告 . 性 能 分 析 报 告 和 执行 
追踪 报告 。 它 还 提供 对 被 测 代码 进行 静态 分 析 和 运行 时 分 析 功 能 ,使 代 入 式 测试 
实现 一 体 化 的 集成 。Test RealTime 通过 分 析 源 代码 ,自动 生成 测试 驱动 (Test 
Driver) 和 桩 (Test Stub) 模 板 ,通过 Target Deployment Port 技术 同时 支持 开发 
机 和 目标 机 的 测试 。 


15.7.6 软件 测试 管理 工具 


测试 过 程 要 涵盖 单元 测试 集成 测试 .系统 测试 .回归 测试 和 验收 测试 等 各 个 阶段 ,如 
何 有 效 地 组 织 管理 这 些 不 同 阶段 的 测试 尤为 重要 ,因此 ,需要 使 用 软件 测试 管理 工具 。 软 
件 测试 管理 工具 能 管理 整个 测试 过 程 ,从 测试 计划 、 测 试 设计 、 测 试 执行 ,测试 结果 到 测试 
报告 ,提供 一 个 基于 中 央 数 据 库 的 协同 合作 的 环境 。 虽然 测 试 人 员 分 布 在 各 地 ,但 不 管 
在 何 时 何 地 都 能 参与 整个 测试 过 程 。 

软件 测试 管理 工具 主要 有 原 MI 公司 的 TestDirector、 Rational 公司 的 Test 
Manager Silicon Valley Networks 公司 的 Test Expert 等 。 
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1) 缺陷 跟踪 工具 

缺陷 跟踪 工具 主要 有 Rational 公司 的 ClearQuest、Compuware 公司 的 TrackRecord 、 
WEBsina 公司 的 BugZero 和 SilkRadar, 以 及 著名 免费 软件 Bugzilla。 这 里 以 SilkRadar 
为 例 , 对 缺陷 跟踪 工具 做 一 个 简单 的 介绍 。 

SilkRadar 能 对 软件 缺陷 进行 记录 ,并 对 缺陷 处 理 结果 状态 进行 自动 跟踪 .记录 和 归 
类 处 理 , 能 够 灵活 满足 各 种 业务 环境 和 各 种 产品 的 需求 。SilkRadar 提供 行为 驱动 的 工作 
流程 ,能 够 帮助 开发 人 员 自动 完成 对 缺陷 管理 的 相关 处 理 。 

。 可 以 记录 软件 测试 过 程 中 识别 的 测试 结果 以 及 用 户 报告 的 问题 。 

。 通过 电子 邮件 通知 自动 分 配 规则 .预先 定义 的 优先 级 等 对 问题 进行 分 解 。 

。 能 够 按照 预先 设 定 的 规则 对 各 个 缺陷 状态 按照 其 生命 周期 进行 相应 处 理 ,迅速 地 

将 任务 分 派 给 相关 人 员 进 行 处 理 。 
。 定制 处 理 的 卡片 帮助 开发 测试 人 员 关 注 对 自己 最 重要 的 信息 ,如 每 个 缺陷 可 能 造 
成 的 风险 等 。 

SilkRadar 允许 用 户 通过 Web 方式 使 用 ,这 样 有 利于 不 同 地 点 间 甚 至 跨国 的 各 个 开 
发 团队 间 进 行 的 缺陷 管理 。 在 浏览 器 中 ,允许 用 户 进行 自 定义 链接 ,访问 自己 所 关心 的 区 
域 。 这 样 用 户 可 以 在 任何 时 刻 快 速 找 到 关键 信息 ,从 而 提高 工作 效率 。 

SilkRadar 提供 了 许多 预定 义 的 、 用 户 定制 的 报表 、 图 表 以 及 用 于 有 效 提高 表达 项 目 
状态 的 语汇 。SilkRadar 使 用 统一 定义 的 信息 提高 沟通 效率 ,有 助 于 解决 缺陷 管理 问题 。 
此 外 ,可 以 保存 并 重用 个 人 级 .工作 组 级 .公司 级 的 各 种 查询 条 件 。 通 过 使 用 SQL 语言 ， 
可 以 从 不 同 数据 库 中 提取 复杂 的 跨 产品 的 问题 和 信息 。 

2) MI 公司 的 TestDirector 

TestDirector 是 一 套 测试 管理 软件 。 可 以 用 它 来 科学 地 规范 测试 管理 流程 ,建立 起 
针对 测试 项 目的 测试 方案 和 计划 ,消除 组 织 机 构 间 、 地 域 间 的 障碍 ,让 测试 人 员 、 开 发 人 员 
或 其 他 IT 人 员 通 过 一 个 中 央 数 据 仓库 ,在 不 同 地 方 就 能 交互 测试 信息 。TestDirector 将 
测试 过 程 流水 化 一 一 从 测试 需求 管理 ,测试 计划 、 测 试 日 程 安排 ,测试 执行 到 出 错 后 的 错 
误 跟踪 , 仅 在 一 个 基于 浏览 器 的 应 用 中 便 可 完成 ,而 不 需要 每 个 客户 端 都 安装 一 套 客户 端 
程序 。 

。 需求 管理 。 程 序 的 需求 驱动 整个 测试 过 程 。TestDirector 的 Web 界面 简化 了 这 
些 需 求 管理 过 程 , 以 此 可 以 验证 应 用 软件 的 每 一 个 特征 或 功能 是 否 正 常 。 通 过 提 
供 一 个 比较 直观 的 机 制 将 需求 和 测试 用 例 、 测 试 结果 和 报告 的 错误 联系 起 来 ,从 
而 确保 能 够 达到 最 高 的 测试 覆盖 率 。 即 使 频繁 更 新 , 仍 能 简单 地 将 应 用 需求 和 相 
关 的 测试 对 应 起 来 。 
测试 计划 的 制订 。 其 Test Plan Manager 指导 测试 人 员 如 何 将 应 用 需求 转换 为 具 
体 的 测试 计划 ,组 织 起 明确 的 任务 和 责任 .并 在 测试 计划 期 间 为 测试 小 组 提供 关 
键 要 点 和 Web 界面 来 协调 团队 间 的 沟通 。 它 提供 了 多 种 方式 来 建立 完整 的 测试 
计划 。 

(1) 可 以 从 草图 上 建立 一 份 计划 。 
(2) 根据 用 Requirements Manager 所 定义 的 应 用 需求 ,通过 Test Plan Wizard 快速 
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生成 测试 计划 。 

(3) 如 果 已 经 将 测试 计划 以 字 处 理 文件 形式 ,如 Word 方式 存储 ,可 以 再 利用 这 些 信 
息 , 并 将 它 导 人 到 Test Plan Manager。 

(4) 把 各 种 类 型 的 测试 汇总 在 一 个 可 折 释 式 目录 树 内 ,可 以 在 一 个 目录 下 查询 到 所 
有 的 测试 计划 。 

(5) Test Plan Manager 还 能 进一步 完善 测试 设计 和 以 文件 形式 描述 每 一 个 测试 步 
又 ,包括 每 一 项 测试 的 操作 顺序 .检查 点 和 预期 的 结果 ,为 每 一 项 测试 添加 附件 , 如 
Word、Excel 和 HTML, 用 于 更 详尽 地 记录 每 次 测试 计划 。 

。 人 工 与 自动 测试 的 结合 。 多 数 测试 项 目 需要 人 工 与 自动 测试 结合 。 即 使 符合 自 
动 测试 要 求 的 工具 ,在 大 部 分 情况 下 也 需要 人 工 操 作 。 启 用 一 个 演变 性 的 而 非 变 
革 性 的 自动 化 切换 机 制 ,能 让 测试 人 员 决 定 哪些 重复 的 人 工 测 试 可 以 转变 为 自动 
脚本 以 提高 测试 速度 。TestDirector 还 能 简化 这 种 转换 ,并 可 以 快速 启动 测试 设 
计 过 程 。 
安排 和 执行 测试 。 一 旦 测试 计划 建立 后 , TestDirector 的 测试 实验 室 管理 功能 为 
测试 日 程 制定 提供 一 个 基于 Web 的 框架 。 其 Smart Scheduler 能 根据 测试 计划 
中 建立 的 指标 对 运行 中 的 测试 执行 监控 ,出 现 错误 时 能 自动 分 辨 是 系统 错误 还 是 
应 用 错误 ,然后 将 测试 切换 到 网 络 中 的 其 他 机 器 。 或 当 网 络 中 任何 一 台 主 机 空 
闲 ,测试 任务 会 安排 到 该 主机 上 ,可 充分 利用 网 络 、` 机 器 和 时 间 等 。 使 用 Graphic 
Designer 图 表 设 计 可 以 快速 将 测试 分 类 以 满足 不 同 的 测试 目的 ,如 功能 性 测试 、 
负载 测试 和 完整 性 测试 等 。 其 拖 动 功能 可 简化 设计 和 排列 在 多 个 机 器 上 运行 的 
测试 ,并 可 根据 设 定好 的 时 间 、 路 径 或 其 他 测试 的 成 功 与 否 ,为 连续 测试 制定 测试 
执行 日 程 。 
缺陷 管理 。TestDirector 的 出 错 管理 直接 贯穿 于 测试 的 全 过 程 ,从 最 初 发 现 问题 
到 修改 错误 ,再 到 验证 修改 结果 。 由 于 同一 项 目 组 中 的 成 员 经 常 分 布 于 不 同 的 地 
方 ,TestDirector 基于 浏览 器 的 特征 使 用 户 可 以 随时 随地 查询 错误 跟踪 情况 。 使 
用 出 错 管 理 , 测 试 人 员 只 需 进 入 一 个 URL, 就 可 以 汇报 和 更 新 错误 、 过 滤 整 理 错 
误 列表 并 做 出 趋势 分 析 。 
图 形 化 和 报表 输出 。TestDirector 常规 化 的 图 表 和 报告 辅助 对 数据 信息 进行 分 
析 , 并 以 标准 的 HTML 或 Word 形式 提供 测试 报告 生成 和 发 送 。 测 试 分 析 数 据 
还 可 简便 地 输入 到 标准 化 的 报告 工具 中 ,如 Excel、 ReportSmith、CrystalReports 
和 其 他 类 型 的 第 三 方 工具 。 
与 其 他 工具 的 集成 。TestDirector 可 以 和 LoadRunner、WinRunner 进行 有 效 集 
成 ,来 统一 管理 各 种 测试 用 例 、 测 试 脚本 的 使 用 情景 与 测试 结果 。 并 且 可 以 对 发 
生 问题 的 部 分 进行 错误 跟踪 ,达到 与 开发 部 门 的 实时 交互 。 用 WinRunner、 
QuickTest、LoadTest 或 LoadRunner 来 自动 运行 功能 性 或 负载 测试 ,无 论 成 功 与 
否 , 测 试 信息 都 会 被 自动 汇集 到 TestDirector 的 数据 存储 中 心 。 
3) 北京 航空 航天 大 学 软件 工程 研究 所 的 QESuite 系列 
QESuite 1.0 系列 产品 是 一 个 支持 C/S 或 B/S 结构 的 测试 过 程 管理 工具 系列 。 它 采 
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用 


际 公认 的 “以 软件 问题 报告 为 核心 、 以 测试 计划 为 指导 、 以 测试 用 例 为 驱动 ”的 测试 理 


念 ,通过 测试 用 例 和 问题 报告 的 配合 使 用 ,共同 完成 对 软件 测试 过 程 的 科学 \ 有 效 管理 。 


Is, 
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其 主要 特点 如 下 : 

。 可 支持 对 多 个 被 测 项 目的 追踪 管理 。QESuite 可 以 轻松 对 多 个 测试 项 目 进行 测 
试 过 程 管理 ,并 支持 在 不 同 测试 项 目 之 间 传 递 和 共享 测试 用 例 、 软 件 问 题 报 告 
信息 。 

可 支持 对 测试 计划 的 管理 。QESuite 提供 了 详细 的 配置 手段 并 提供 简便 的 定义 
方式 ,支持 对 测试 计划 中 的 测试 需求 划分 与 展开 、 测 试 人 员 的 组 织 、 测 试 环 境 的 配 
置 和 测试 任务 的 划分 等 核心 管理 操作 。 

可 支持 对 测试 用 例 的 全 生命 周期 追踪 和 管理 。QESuite 提供 了 完善 的 测试 生命 
周期 定义 ,可 对 测试 用 例 从 新 建 、 审 批 到 测试 任务 加 载 ,测试 结果 的 全 面 追踪 。 在 
提供 测试 用 例 的 分 类 存储 机 制 基 础 上 ,可 对 测试 用 例 在 不 同 测试 任务 .不 同 测试 
配置 ,不同 测 试 版 本 和 不 同 测试 人 员 执 行 的 结果 进行 全 面 记录 和 追踪 ,可 有 效 提 
高 测试 过 程 管理 力度 与 管理 质量 。 

可 支持 对 软件 问题 报告 的 全 生命 周期 的 追踪 和 管理 。QESuite 提供 了 先进 合理 
的 软件 问题 生命 周期 定义 ,提供 了 5 种 软件 问题 状态 定义 ,可 清晰 定义 当前 软件 
问题 所 处 的 状态 。 并 提供 了 软件 问题 子 状态 机 制 , 便 于 定位 和 分 类 软件 问题 的 处 
理 原 因 。 该 机 制 可 以 很 好 地 满足 软件 问题 报告 的 全 生命 周期 追踪 和 管理 。 


8 习题 


请 参考 课文 内 容 以 及 其 他 资料 ,完成 下 列 选择 题 。 
(1) 下 列 有 关 自 动 测试 的 基本 概念 中 ,错误 的 是 ( )5 
A. 仅 有 自动 测试 执行 而 无 自动 比较 , 则 不 算是 完全 自动 化 测试 
B. 自动 比较 的 内 容 可 以 是 文本 格式 化 数据 ,电子 邮件 信息 .数据库 内 容 等 
C， 自动 比较 的 局 限 性 在 于 自动 比较 可 能 没有 人 工 比较 灵活 性 高 
D. 自动 比较 海量 数据 ,屏幕 输出 等 信息 不 是 计算 机 能 够 胜任 的 自动 工作 
(2) 有 关 自 动 化 测试 的 说 法 中 ,错误 的 是 ( ) 
A. 自动 化 测试 过 程 的 核心 内 容 是 执行 测试 用 例 
B. 采用 技术 手段 保证 自动 化 测试 的 连续 性 和 准确 性 很 重要 
C. 自动 化 辅助 手工 测试 过 程 中 ,设置 和 清除 测试 环境 是 自动 开展 的 
D. 自动 化 测试 过 程 中 , 除 选 择 测 试用 例 和 分 析 失 败 原 因 外 ,其 他 过 程 都 是 自动 
化 开展 的 
(3) 以 下 有 关 自 动 化 测试 脚本 的 说 法 中 ,错误 的 是 (  )。 
A. 数据 驱动 脚本 将 测试 输入 存储 在 脚本 中 
B. 线性 脚本 容易 受 软件 变化 的 影响 , 且 无 共享 和 重用 的 脚本 
C. 结构 化 脚本 的 优点 是 健壮 性 更 好 ,可 以 对 一 些 容易 导致 测试 失败 的 特殊 情况 
进行 处 理 
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D. 共享 脚本 的 维护 开销 低 于 线性 脚本 
(4) 下 列 情况 下 会 考虑 使 用 自动 测试 的 是 ( 。 )。 
A. 对 软件 产品 的 次 要 部 件 进行 测试 
B. 所 开发 的 软件 产品 的 需求 不 稳定 
C. 需要 反复 执行 的 测试 ,使 用 不 同 输入 数据 值 进行 反复 测试 
D. 由 客户 方 组 织 的 验收 测试 
(5) 下 列 有 关 软 件 测试 工具 的 说 法 中 错误 的 是 (。”)。 
A. 静态 测试 工具 可 用 于 对 软件 需求 .结构 设计 ,详细 设计 和 代码 进行 评审 、 走 查 
和 审查 
B. 静态 测试 工具 可 对 软件 的 复杂 度 分 析 、 数 据 流 分 析 、 控 制 流 分 析 和 接口 分 析 
提供 支持 
C. 动态 测试 工具 可 用 于 软件 的 覆盖 分 析 和 性 能 分 析 
D. 动态 测试 工具 不 包括 软件 的 仿真 测试 和 变异 测试 
(6) 用 QESat/C 工具 进行 软件 分 析 与 测试 时 ,以 下 说 法 中 错误 的 是 ( ”)。 
A. 白 盒 测试 又 称 为 程序 结构 测试 , 它 主 要 进行 程序 迎 辑 结构 的 覆盖 测试 
B. 在 进行 测试 之 前 ,必须 先 建立 以 . prj 为 后 级 的 测试 项 目 
C. 被 测 源 文 件 可 放 在 任意 目录 下 
D,. 进行 软件 静态 分 析 不 必 运 行 被 测 程序 
(7) 软件 测试 的 目的 是 ( ) ,通常 可 分 为 白 盒 测 试 和 黑 盒 测试 。 白 盒 测试 是 根据 
程序 的 ( 。  ) 来 设计 测试 用 例 , 黑 盒 测 试 是 根据 软件 的 规格 说 明 来 设计 测试 用 例 。 常 用 
的 黑 盒 测 试 方法 有 边 值 分 析 、 等 价 类 划分 .错误 猜测 、 因 果 图 等 。 其 中 ,( ”) 经 常 与 其 他 
方法 结合 起 来 使 用 。 软 件 测试 的 步骤 主要 有 单元 测试 .集成 测试 和 确认 测试 。 如 果 一 个 
软件 作为 产品 被 许多 客户 使 用 的 话 , 在 确认 测试 时 通常 要 经 过 a 测试 和 B 测试 的 过 程 。 
其 中 ,a 测试 是 ( 。””) 进 行 的 一 种 测试 。 在 软件 设计 和 编码 时 ,采取 ( ) 等 措施 都 有 利 


于 提高 软件 的 可 测试 性 。 
A. 发 现 程序 中 的 所 有 错误 @@ 证 明 程序 是 正确 的 
@ 尽 可 能 多 地 发 现 程序 中 的 错误 @ 证 明 程序 做 了 应 做 的 事 
B. @ 功能 @ 性 能 加 内 部 逻辑 @ 内 部 数据 
CO 边 值 分 析 @ 等 价 类 划分 @ 错误 猜测 @ 因果 图 


D. @ 在 开发 者 现场 由 开发 方 的 非 本 项 目 开 发 人 员 
@ 在 开发 者 现场 由 用 户 
@ 在 用 户 现场 由 开发 方 的 非 本 项 目 开 发 人 员 
@ 在 用 户 现场 由 用 户 

E. (不 使 用 标准 文本 以 外 的 语句 ,书写 详细 正确 的 文档 
@ 不 使 用 标准 文本 以 外 的 语句 ,采用 良好 的 程序 结构 
@ 书写 详细 正确 的 文档 ,信息 隐蔽 
@ 书写 详细 正确 的 文档 ,采用 良好 的 程序 结构 
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15.9 实验 与 思考 
15.9.1 实验 目的 


本 章 实验 的 目的 : 

(1) 熟悉 软件 自动 测试 的 原理 和 方法 ,了 解 何 种 情况 下 适合 进行 自动 化 测试 。 

(2) 结合 软件 生命 周期 ,了 解 自 动 测试 工具 的 类 型 以 及 测试 步骤 和 自动 测试 用 例 设 
计 基 础 ,了 解 测试 自动 化 的 优点 和 限制 。 

(3) 熟悉 测试 工具 的 分 类 ,了 解 主流 测试 工具 的 基本 功能 。 

(4) 网 络 搜索 和 了 解 集成 测试 工具 Selenium 和 脚本 工具 Autolt, 尝 试 应 用 软件 完成 
一 定 的 功能 ,以 深入 体验 和 熟悉 软件 测试 工具 。 


15.9.2 工具 /准备 工作 


在 开始 本 实验 之 前 ,请 回顾 教科 书 的 相关 内 容 。 
需要 准备 一 台 带 有 浏览 器 ,能够 访问 因特网 的 计算 机 。 


15.9.3 实验 内 容 与 步骤 


请 查阅 有 关 资 料 ( 例 如 教材 内 容 和 专业 网 站 等 ) ,结合 自己 的 理解 ,尽量 用 自己 的 语言 
回答 以 下 问题 : 

1) 在 确定 采用 自动 化 测试 方法 后 ,其 他 非 自 动 化 测试 方法 是 否 仍 然 需要 ? 如 果 需 
要 , 则 主要 用 于 哪些 方面 ? 

答 


全 : 


2) 基于 图 形 用 户 界面 (GUD 的 自动 化 测试 工具 的 基本 原理 是 : 
答 


合 : 


3) 自动 化 测试 工具 的 主要 特征 是 : 
《四 
(2) 
(3) 
(4) 
to 
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4) 软件 测试 工具 。 
请 上 网 搜索 和 浏览 (例如 搜索 关键 字 是 “软件 测试 工具 ”) ,了 解 软件 测试 自动 化 的 应 
用 情况 ,看 看 哪些 网 站 在 做 着 软件 自动 化 测试 的 技术 支持 工作 ? 并 请 在 表 15-1 中 记录 搜 
索 结果 。 
表 15-1 软件 自动 化 测试 专业 网 站 记录 
网 站 名 称 网 址 内 容 描述 


你 在 本 次 搜索 中 使 用 的 关键 词 主要 是 : 


至 少 找到 3 个 主流 的 用 于 自动 测试 的 软件 工具 ,并 作 简 单 描述 : 
(1) 工具 名 称 : 
简单 描述 : 
你 的 看 法 : 
(2) 工具 名 称 : 
简单 描述 : 
你 的 看 法 : 
(3) 工具 名 称 : 
简单 描述 : 
你 的 看 法 : 
5) Selenium(SeleniumHQ)( 见 图 15-6) 是 Thoughtworks 公司 的 一 个 集成 测试 的 强 
大 工具 ,包括 两 个 版 本 : Selenium-core 和 Selenium-rc。Selenium-core 使 用 HTML 方式 
来 编写 测试 脚本 ,Selenium-rc 使 用 具体 的 语言 (例如 Java) 来 编写 测试 类 。 
请 网 络 搜索 ,了 解 有 关 Selenium 的 进一步 信息 ,建议 有 兴趣 .有 条 件 的 学 生 尝 试 使 用 
Selenium 完成 一 个 网 站 主要 功能 的 测试 。 
请 记录 : 简单 评述 Selenium 软件 。 


6) AutoIt(http://www. autoitscript. com/autoit3/)( 见 图 15-7) 是 一 款 类 似 BASIC 
脚本 语言 的 功能 强大 的 脚本 (Script) 免 费 软 件 工 具 , 它 提供 了 一 个 执行 Script 的 平台 , 设 
计 用 于 Windows GUI 中 进行 自动 化 操作 , 它 利用 模拟 键盘 按键 、 鼠 标 移动 和 窗口 /控件 
的 组 合 来 实现 自动 化 任务 。 随 着 其 v3 版 本 的 到 来 , 它 也 适合 于 家 庭 自动 化 和 编写 用 以 完 
成 重复 性 任务 的 脚本 。 
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E_n A (Frozen) AutoIt v3 Wind... 厨 | 器 | 辐 | 


Fie Edt Options Help 了 ile Qptions Help 
Base URL | http://www,google.com/ Basic Window Info 
Orn Owsk Ose 也 ,号 | 国 @ J 
Editor [Source 
|_ Command Target Yalue 
open 1 
type q selenium IDE rocks! 
chickAndWait btnG 
cickAndwant Ink=Antony Marcan.,. (Double-chick fist entries to copy to chipboard)] 
chickAndWait link=5 comments 
Control | Visible Text | Hidden Text 
Command [assertTextpresent wu] 
Target I think record playback is a wonderful thing Find 
Value 
Log Console Info 四 Clear 
图 15-6 ”Selenium IDE 的 运行 界面 图 15-7 Autolt 的 运行 界面 


Autolt 的 Script 语法 类 似 于 VBScript, 简 单 易学 。 安 装 Autolt ,可 以 选择 官方 安装 
包 , 也 可 以 选择 Autolt 中 文 论坛 (简称 ACN) 出 品 的 汉化 增强 版 。 

请 网 络 搜索 ,了 解 有 关 Autolt 的 进一步 信息 ,建议 有 兴趣 ,有 条 件 的 学 生 尝试 使 用 
Autolt 以 进一步 熟悉 Autolt 软件 ,体验 免费 软件 及 其 发 展 。 

请 记录 : 简单 评述 Autolt 软件 。 


15.9.4 实验 总 结 


15.9.5 实验 评价 (教师 ) 
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15.10 阅读 与 分 析 : 浅 谈 如 何 提高 软件 项 目 产品 的 质量 


在 考虑 如 何 提高 产品 质量 前 ,我 们 需要 明白 什么 是 产品 的 质量 ,对 于 很 多 从 事 软 件 开 
发 或 者 互联 网 开发 的 工程 师 或 者 项 目 经 理 来 说 ,第 一 反应 估计 应 该 是 “产品 的 质量 就 是 产 
品 的 缺陷 率 ”。 其 实 真正 的 产品 质量 应 该 和 用 户 满意 度 划 上 等 号 。 考 量 一 个 产品 是 否 满 
足 质量 要 求 应 该 就 是 考量 一 个 产品 是 否 满足 用 户 的 要 求 ,当然 这 里 的 用 户 是 一 个 逻辑 上 
的 概念 , 指 产品 的 典型 目标 用 户 。 

所 以 ,要 提高 产品 质量 就 是 要 提高 产品 的 用 户 满意 度 。 这 是 一 个 系统 的 工程 ,涵盖 了 
产品 设计 、 产 品 开发 的 所 有 阶段 和 方方面面 。 基 于 时 间 和 篇 幅 的 考虑 ,本 文 只 想 对 软件 本 
身 的 质量 来 进行 讨论 。 

1) 软件 的 质量 是 规划 出 来 的 ,而 不 是 测试 出 来 

个 人 认为 ,项 目的 计划 阶段 已 经 决定 了 软件 的 质量 。 很 多 项 目 人 员 和 项 目 经 理 一 直 
对 做 软件 的 开发 计划 异常 地 不 理解 ,认为 在 软件 开发 的 过 程 中 各 种 风险 发 生 的 可 能 太 大 ， 
计划 永远 都 跟 不 上 变化 。 而 我 认为 ,这 里 的 软件 开发 计划 并 不 仅仅 是 一 个 时 间 计 划 。 而 
是 让 项 目 经 历 在 计划 的 过 程 中 综合 考虑 项 目 实施 的 各 个 方面 ,包括 范围 .进度 、 质 量 、 风 险 
等 ,从 而 形成 一 份 包括 进度 计划 、 质 量 保证 计划 和 风险 计划 的 项 目 管理 计划 。 在 这 里 根据 
项 目的 情况 ,这 些 计 划 可 以 不 以 书面 的 形式 来 进行 体现 。 然 而 项 目 经 理 一 定 要 经 过 充分 
的 思考 和 规划 。 

为 保证 软件 产品 的 质量 ,项 目 经 理 在 这 个 阶段 要 考虑 的 因素 包括 但 不 限于 如 下 各 个 
方面 。 

(1) 定义 项 目的 质量 目标 ,这 些 指标 包括 功能 指标 ,性 能 指标 等 。 项 目 也 可 以 根据 公 
司 的 情况 为 各 个 研发 活动 定义 质量 目标 。 比 如 设计 阶段 的 Bug 检 出 率 等 。 质 量 目标 是 
基于 质量 保证 活动 都 要 依据 目标 进行 建设 。 

(2) 项 目 采用 的 软件 开发 流程 。 采 用 什么 样 的 流程 取决 于 公司 的 标准 流程 和 裁剪 规 
范 以 及 软件 项 目的 难 易 程度 。 在 这 个 研发 活动 中 项 目 经 理 需要 根据 自己 的 经 验 判断 项 目 
需要 的 质量 保证 过 程 。 比 如 是 否 需要 引入 单元 测试 ,是 否 需要 测试 用 例 等 。 

(3) 项 目的 三 要 素 的 平衡 ,我 们 之 前 说 过 ,产品 的 质量 一 产品 的 用 户 满意 度 。 所 以 对 
不 同 的 产品 用 户 的 满意 度 是 不 同 的 ,比如 电信 产品 的 质量 要 求 和 互联 网 产品 的 质量 要 求 
是 不 同 的 ,项 目 经 理 需 要 能 够 根据 产品 的 用 户 满意 度 在 项 目的 三 要 素 之 间 进 行 平衡 。 

(4) 项 目的 质量 保证 计划 ,这 个 研发 活动 应 该 是 SQA 的 职责 ,但 是 很 多 企业 都 没有 
设立 这 个 职位 ,在 没有 这 个 职位 的 时 候 , 上 默认 应 该 由 项 目 经 理 来 承担 这 个 职责 。 项 目 经 理 
要 根据 之 前 定义 的 项 目 目标 来 定义 质量 保证 活动 和 质量 保证 计划 。 项 目 质量 保证 计划 需 
要 依据 项 目 定义 的 软件 开发 流程 ,是 对 软件 开发 流程 中 质量 活动 的 更 详细 的 定义 。 

不 管 你 采用 的 是 CMM 还 是 敏捷 的 软件 开发 ,以 上 活动 都 需要 进行 ,只 不 过 进行 的 复 
杂 程 度 和 研发 活动 的 交付 不 同 罢了 ,最 基本 的 要 求 是 项 目 经 理 要 在 自己 的 脑子 里 面 考虑 
过 以 上 事情 。 

从 管理 上 来 说 “软件 的 质量 是 规划 出 来 的 ,而 不 是 测试 出 来 ” 讲 的 是 流程 。 决 定 软件 
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产品 质量 的 另外 一 个 关键 要 素 是 人 。 这 里 的 人 包括 了 技能 这 个 要 素 。 在 网 络 上 关于 
CMM 和 敏捷 开发 的 讨论 层出不穷 ,我 对 它们 的 极端 的 理解 是 ,CMM 强调 的 是 流程 ,流程 
为 王 , 而 敏捷 开发 更 多 的 是 强调 人 的 作用 。 当 然 这 是 一 个 极端 的 理解 ,它们 的 区 别 主要 体 
现在 侧重 点 的 不 同上 。 

2) 产品 是 人 做 到 的 ,所 以 产品 的 质量 完全 取决 于 产品 的 开发 人 员 

然而 对 人 的 管理 是 一 门 艺 术 , 要 远 复杂 于 一 切 流程 和 规范 。 所 以 这 部 分 技巧 的 整理 
是 一 个 难题 ,有 点 只 可 意 会 不 可 言传 的 味道 。 

(1) 建立 团队 文化 。 建 立 团队 文化 非常 地 重要 ,因为 重要 所 以 也 比较 难以 建立 。 要 
提高 产品 的 质量 ,首先 要 在 团队 里 面 建立 一 种 负责 任 的 团队 文化 ,这 只 是 其 中 一 点 ,也 是 
最 重要 的 一 点 。 

(2) 提高 团队 的 技能 ,建立 学 习 型 组 织 。 培 养 下 属 永远 是 一 个 Leader 的 主要 职责 ， 
需要 通过 努力 把 团队 建设 成 为 一 个 学 习 型 的 组 织 , 进 而 形成 进取 的 团队 文化 ,如 何 建立 学 
习 型 组 织 请 参考 : 

总 之 ,如 果 要 提高 产品 质量 ,可 以 从 两 方面 下 手 。 第 一 ,建立 一 套 合适 的 产品 开发 体 
系 ,可 以 参考 IPD。 第 二 ,进行 团队 建设 ,建立 高 效能 的 团队 。 

资料 来 源 : 中 国 IT 实验 室 http://softtest. chinaitlab. com/ 。 


一 354 


第 16 章 软件 测试 管理 


软件 项 目 管理 的 目标 就 是 使 软件 项 目 能 够 按照 预定 的 成 本 、 进 度 、 质 量 顺利 完成 ,而 
对 软件 开发 过 程 中 的 成 本 、 资 源 、 进 度 、 质 量 、 风 险 等 进行 分 析 和 控制 的 活动 。 对 于 软件 测 
试 项 目的 管理 ,在 概念 上 和 一 般 项 目 管理 没有 区 别 , 但 所 管理 的 具体 内 容 、 采 用 的 具体 技 
术 和 工具 是 有 所 不 同 。 软 件 测试 项 目的 管理 ( 即 软件 测试 管理 ) ,始终 将 质量 放 在 第 一 ,所 
有 管理 工作 都 围绕 提高 产品 质量 而 展开 ,防范 测试 中 所 存在 的 各 种 风险 ,密切 跟踪 和 分 析 
缺陷 ,最 终 保证 在 合理 的 成 本 和 进度 控制 下 ,完成 所 有 的 测试 工作 ,发 布 满足 用 户 要 求 和 
期 望 的 、 可 维护 的 、 高 质量 的 软件 产品 。 


16.1 软件 测试 管理 的 特点 


软件 测试 管理 贯穿 整个 软件 开发 生命 周期 ,包括 测试 项 目 启动 .计划 、 设 计 、 实 施 和 结 
束 等 各 个 阶段 的 管理 ,其 基本 过 程 就 是 计划 、 组 织 和 监控 ,而 管理 内 容 包括 测试 范围 . 资 
源 .时间 (进度 )、 风 险 成 本 、` 质 量 沟通 和 综合 等 。 

软件 测试 管理 具有 以 下 特点 : 

(1) 软件 测试 通常 难以 定义 清晰 的 工作 目标 ,测试 过 程 难以 确定 什么 时 候 可 以 结束 ， 
测试 过 程 找 不 到 严重 的 缺陷 并 不 代表 软件 不 存在 严重 的 缺陷 等 ,这 对 软件 测试 的 风险 管 
理 、 资 源 估算 等 提出 了 更 高 的 要 求 。 

(2) 对 软件 测试 的 变化 控制 和 预警 分 析 要 求 更 高 。 需 求 变化 多 是 软件 项 目的 最 显著 
特点 ,而 需求 变化 会 导致 对 系统 设计 、 程 序 代码 等 进行 相应 的 修改 ,修改 过 程 中 又 可 能 产 
生 新 的 缺陷 ,其 结果 受 影响 最 大 的 就 是 软件 测试 。 当 软件 设计 和 编程 被 拖延 时 ,该 软件 产 
品 发 布 的 时 间 往 往 不 能 变动 ,结果 只 能 压缩 测试 时 间 。 所 以 ,测试 管理 需要 更 密切 关注 需 
求 和 设计 的 变更 ,及 时 进行 预警 报告 。 

(3) 软件 测试 管理 要 求 更 严格 和 细致 。 程 序 设计 、 编 码 等 出 现 问题 ,需要 有 测试 人 员 
去 把 关 。 如 果 测 试 人 员 的 责任 心 不 高 ,有 些 严重 问题 没 能 被 及 时 发 现 而 漏 掉 ,最 终 遗 留 到 
客户 那里 ,可 能 对 客户 使 用 产品 造成 很 大 影响 。 

(4) 测试 任务 的 管理 难度 大 ,比如 集成 测试 、 功 能 测试 和 验收 测试 等 关联 较 大 ,但 要 
求 的 技术 不 同 ,任务 边界 模糊 ,不 容易 分 离 。 

(5) 软件 测试 对 团队 建设 有 更 高 要 求 。 软 件 测试 是 一 个 技术 工作 ,要 求 测试 人 员 能 
够 全 面 理解 产品 的 功能 特性 ,对 产品 各 个 部 分 能 够 融会 贯通 。 同 时 又 要 求 测试 人 员 具 有 
丰富 的 工作 经 验 、 良 好 的 心理 素质 和 责任 心 。 所 以 ,在 软件 测试 管理 中 ,在 人 才 激励 和 团 
队 管 理 问题 上 应 给 予 高 度 的 重视 。 

由 此 可 见 , 软 件 测试 管理 的 好 坏 对 产品 质量 影响 更 直接 而 且 更 富有 挑战 性 ,要 加 强 软 
件 测试 的 质量 管理 、 人 力 资源 管理 ,沟通 管理 和 风险 管理 等 。 管 理 软 件 测试 项 目 ,要 制定 
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好 测试 管理 流程 和 测试 规范 ,明确 定义 测试 过 程 中 各 种 活动 ,技术 标准 、 度 量 指标 和 相应 
的 文档 模板 。 

软件 测试 管理 的 基本 原则 是 : 

(1) 可 靠 的 需求 。 测 试 的 需求 是 经 各 方 一 致 同意 的 、 可 实现 的 并 在 文档 中 清楚 地 、 完 
整地 和 详细 地 描述 的 。 

(2) 能 够 适应 开发 过 程 模型 。 例 如 , 当 采 用 快速 开发 模型 或 敏捷 方法 时 ,为 了 能 够 应 
对 需求 的 变化 , 面 对 频 繁 的 软件 发 布 ,测试 人 员 需 要 和 开发 人 员 同 步 工作 ,并 尽力 实现 自 
动 化 测试 。 

(3) 充分 测试 和 尽早 开始 测试 。 每 次 改 错 或 变更 后 ,不 仅 要 测试 修改 的 地 方 , 而 且 应 
该 进行 足够 的 回归 测试 。 

(4) 合理 的 时 间 表 。 为 测试 设计 、 执 行 、 变 更 后 再 测试 以 及 测试 结果 分 析 等 留 出 足够 
的 时 间 ,进行 周密 计划 ,不 应 使 用 突击 的 办 法 来 完成 项 目 。 

(5) 充分 沟通 。 不 仅 在 测试 团队 内 部 做 好 沟通 ,而 且 要 与 开发 人 员 产品 经 理 、 市 场 
人 员 其 至 客户 等 进行 有 效 沟通 ,并 采用 合适 的 通信 手段 ,如 电话 、 即 时 消息 (IM) 、 远 程 在 
线 会 议 系统 和 电子 邮件 等 。 

(6) 基于 数据 库 的 测试 管理 系统 ,通过 这 个 系统 有 效 地 管理 测试 计划 ,测试 用 例 、 测 
试 任务 、 缺 陷 和 测试 报告 等 ,确保 及 时 的 管理 和 良好 的 协作 。 


16.2 软件 测试 的 过 程 管理 


软件 测试 的 过 程 管理 贯穿 于 整个 软件 开发 生命 周期 。 从 项 目 一 开始 ,测试 人 员 就 应 
该 参与 进去 ,审查 需求 文档 、 产 品 规格 说 明 书 、 技 术 设 计 文 档 和 代码 等 ,以 验证 是 否 真 正 符 
合 客 户 需 求 满足 系统 非 功 能 性 质量 的 设计 需求 ,检查 是 否 遵守 代码 的 变量 定义 规则 、 是 
否 有 足够 的 注释 行 等 。 

软件 测试 的 过 程 管理 主要 集中 在 测试 项 目的 启动 ,测试 计划 测试 用例 设计 、 测 试 执 
行 ,测试 结果 的 审查 和 分 析 , 以 及 开发 或 使 用 测试 过 程 管理 工具 等 ,主要 体现 在 如 何 组 织 、 
跟踪 和 控制 这 些 过 程 。 

(1) 测试 项 目 启动 : 确定 项 目 组 长 ,组建 测 试 团队 (小 组 ), 和 开发 等 部 门 开 展 工作 。 
然后 ,参加 有 关 项 目 计 划 、 分 析 和 设计 的 会 议 , 获 得 必要 的 需求 分 析 、 系 统 设 计 文档 ,以 及 
相关 产品 /技术 知识 的 培训 和 转移 。 

(2) 测试 计划 阶段 : 确定 测试 范围 ,测试 策略 和 方法 ,以 及 对 风险 日程 表 、 资 源 等 进 
行 分 析 和 估计 。 

(3) 测试 设计 阶段 : 制订 测试 的 技术 方案 .设计 测试 用 例 .选择 测试 工具 .开发 测试 
脚本 等 ,并 让 其 他 部 门 审查 测试 用 例 。 

(4) 测试 执行 阶段 : 建立 或 设置 相关 的 测试 环境 ,准备 测试 数据 ,执行 测试 用 例 , 报 
告 分 析 和 跟踪 所 发 现 的 软件 缺陷 等 。 测 试 的 执行 直接 关系 到 测试 的 可 靠 性 、 客 观 性 和 准 
确 性 。 

(5) 测试 结果 的 审查 和 分 析 : 测试 结束 后 ,对 测试 结果 要 进行 整体 的 或 综合 的 分 析 ， 
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以 评估 软件 产品 质量 的 当前 状态 ,为 产品 的 改进 或 发 布 提供 依据 。 从 管理 来 讲 , 主 持 好 测 
试 结果 的 审查 和 分 析 会 议 ,以 及 编制 高 质量 的 测试 报告 。 


16.3 软件 测试 的 资源 管理 


软件 测试 的 完成 依赖 于 必要 的 资源 ,资源 管理 的 目的 是 保证 测试 项 目 有 足够 的 资源 ， 
同时 ,能 充分 有 效 地 利用 现 有 资源 ,进行 资源 的 优化 组 合 ,避免 资源 浪费 。 

测试 资源 主要 分 为 人 力 资源 .系统 资源 (硬件 和 软件 资源 ) 以 及 环境 资源 。 每 一 类 资 
源 都 由 4 个 特征 来 说 明 , 即 资源 描述 .可 用 性 说 明 、 需 要 该 资源 的 时 间 以 及 该 资源 被 使 用 
的 持续 时 间 。 资 源 的 可 用 性 必须 在 开发 的 初期 就 建立 起 来 。 

在 进行 测试 项 目的 计划 时 ,就 要 确定 资源 需求 。 其 中 关键 是 人 力 资源 需求 ,而 人 力 资 
源 需 求 依赖 于 对 测试 范围 和 工作 量 的 估算 。 估 算 技 术 主 要 有 经 验 估算 或 专家 判断 ` 类 比 
分 析 、 工 作 结构 分 解 (WBS) 和 数学 建 模 等 。 通 过 比较 .调整 使 用 不 同 技术 导出 的 估算 值 ， 
更 有 可 能 得 到 较 精 确 的 估算 。 


16.3.1 工作 量 的 估算 


工作 量 的 估算 比较 复杂 ,针对 不 同 的 应 用 领域 ,程序 设计 技术 编程 语言 等 ,其 估算 方 
法 是 不 同 的 ,具体 技术 包括 经 验 法 、 类 对 法 、 构 造 性 成 本 模型 (COCOMO)、 多 因素 估算 模 
型 ,用例 估算 模型 等 ,并 基于 一 些 假定 而 获得 最 终 的 估算 结果 。 应 用 的 复杂 度 和 需求 变化 
的 频繁 程度 会 影响 工作 量 , 对 不 同 的 阶段 也 要 分 别 估算 其 工作 量 。 


16.3.2 ”人力 资源 管理 


在 完成 了 测试 工作 量 估算 之 后 ,就 能 够 基本 确定 一 个 软件 测试 项 目 所 需 的 人 员 数 量 ， 
并 写 入 测试 计划 中 。 软 件 测试 项 目 所 需 的 人 员 和 要 求 在 各 个 阶段 是 不 同 的 。 

(1) 在 初期 ,也 许 只 要 测试 组 长 介入 进去 ,为 测试 项 目 提供 总 体 方向 、 制 订 初步 的 测 
试 计划 ,申请 系统 资源 。 

(2) 在 测试 前 期 ,需要 一 些 资深 的 测试 人 员 ,详细 了 解 项 目 所 涉及 的 业务 和 技术 ,分 
析 和 评估 测试 需求 ,设计 测试 用 例 、 开 发 测试 脚本 。 

(3) 在 测试 中 期 ,主要 是 测试 执行 。 如 果 测 试 自动 化 程度 高 ,人 力 的 投入 没有 明显 的 
增加 ;如 果 测 试 自动 化 程度 低 , 需 要 比较 多 的 执行 人 员 ,他 们 也 需要 事先 做 好 一 定 的 准备 。 

(4) 在 测试 后 期 ,资深 的 测试 人 员 可 以 抽出 部 分 时 间 去 准备 新 的 项 目 。 

从 经 验 看 ,人 力 资源 的 管理 难度 主要 有 3 个 方面 : 

。 资源 需求 的 估计 ,依赖 于 工作 量 的 估计 和 每 个 测试 工程 师 的 能 力 评估 ; 

。 资源 的 应 急 处 理 , 预 留 10% 的 资源 作为 人 力 储备 ; 

。 资源 的 阶段 间或 多 个 项 目 间 的 平衡 艺术 。 
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16.3.3 测试 环境 资源 


把 建立 测试 环境 所 需要 的 各 种 软 、 硬 件 资 源 合 称 为 测试 环境 资源 ,其 中 硬件 是 支持 操 
作 系 统 、 应 用 系统 和 测试 工具 等 运行 的 基本 平台 ,软件 资源 包括 操作 系统 、 第 三 方 软件 产 
品 、 测 试 工具 软件 等 。 资 源 可 能 需要 采购 ,这 就 要 求 尽早 开始 实施 ,有 足够 时 间 完 成 采购 
流程 ,并 进行 系统 的 安装 ,配置 和 调试 。 如 果 需 要 对 系统 的 服务 器 端 和 客户 端 都 要 进行 测 
试 , 则 要 分 别 设置 不 同 的 测试 环境 。 如 果 预 算 允 许 的话 , 应 设置 备份 的 测试 环境 ,最 大 限 
度 地 减少 环境 问题 对 测试 进度 的 影响 。 


16.4 测试 的 进度 管理 


测试 开始 前 的 计划 ,对 任务 的 测试 需求 有 一 个 大 体 的 认识 ,但 深度 不 够 ,进度 表 可 能 
只 是 一 个 时 间 上 的 框架 ,其 中 一 定 程度 上 是 靠 计划 制订 者 的 经 验 来 把 握 的 。 随 着 时 间 的 
推移 .测试 的 不 断 深入 ,对 任务 会 有 进一步 的 认识 ,对 很 多 问题 都 不 再 停留 在 比较 粗 的 佑 
算 上 ,测试 进度 表 会 变 得 越 来 越 详细 、 准 确 。 

测试 的 进度 管理 主要 通过 里 程 碑 .关键 路 径 的 控制 并 借助 工具 来 实现 ,同时 充分 了 解 
进度 的 数量 和 质量 的 双重 特性 ,把 握 好 进度 与 质量 、 成 本 的 关系 。 


16.4.1 测试 的 里 程 碑 和 关键 路 径 


在 软件 测试 的 计划 书 中 ,会 制订 一 个 明确 的 日 程 进 度 表 。 如 何 对 项 目 进行 阶段 划分 、 
如 何 控 制 进度 、 如 何 控制 风险 等 有 一 系列 方法 ,但 最 成 熟 的 技术 是 里 程 碑 管 理 和 关键 路 径 
的 控制 。 

1) 里 程 碑 的 定义 和 控制 

里 程 碑 是 项 目 中 完成 阶段 性 工作 的 标志 ,即将 一 个 过 程 性 的 任务 用 一 个 结论 性 的 标 
志 来 描述 任务 结束 的 、 明 确 的 起 止 点 ,一 系列 的 起 止 点 就 构成 引导 整个 项 目 进展 的 里 程 
碑 。 一 个 里 程 碑 标志 着 上 一 个 阶段 结束 ,下 一 个 阶段 开始 ,也 就 是 定义 当前 阶段 完成 的 标 
准 (退出 ) 和 下 个 阶段 启动 的 条 件 或 前 提 ( 进 入 )。 

在 测试 管理 进度 跟踪 的 过 程 中 ,给 予 里 程 碑 事 件 足 够 的 重视 ,往往 可 以 起 到 事半功倍 
的 效用 ,只 要 能 保证 里 程 碑 事 件 的 按时 完成 ,整个 测试 的 进度 也 就 有 了 保障 。 

2) 测试 的 关键 路 径 

每 个 测试 可 以 事先 根据 各 项 任务 的 工作 量 估计 资源 条 件 限 制 和 日 程 安排 ,确定 一 条 
关键 路 径 。 关 键 路 径 是 一 系列 能 够 确定 计算 出 项 目 完成 日 期 的 任务 构成 的 日 程 安排 线 
索 。 也 就 是 说 , 当 关 键 路 径 上 的 最 后 一 个 任务 完成 时 ,整个 项 目 也 就 随 之 完成 了 ;或 者 说 ， 
关键 路 径 上 的 任何 一 项 任务 延迟 ,整个 项 目 就 会 延期 。 为 了 确保 项 目 如 期 完成 ,应 该 密切 
关注 关键 路 径 上 的 任务 和 为 其 分 配 的 资源 ,这 些 要 素 将 决定 项 目 能 否 准 时 完成 。 
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16.4.2 测试 进度 的 特性 及 外 在 关系 


任何 一 项 工作 ,开始 阶段 的 进展 总 是 很 容易 看 到 ,例如 盖 房子 ,从 无 到 有 ,变化 是 很 明 
显 的 。 可 是 越 到 后 来 , 它 的 进度 越 来 越 不 明显 。 软 件 测试 也 是 如 此 ,开始 测试 之 初 ,Bug 
比较 容易 发 现 , 但 测试 的 进展 并 不 是 按 Bug 的 数量 来 计算 的 , 越 到 后 面 ,Bug 越 来 越 难 发 
现 。 要 提高 测试 进度 的 质量 ,将 严重 的 ,关键 的 问题 在 第 一 时 间 发 现 出 来 ,这 样 才 不 至 于 
在 最 后 阶段 使 得 开发 人 员 要 对 代码 做 大 规模 的 变动 ,无 法 保证 测试 的 时 间 , 从 而 影响 软件 
的 质量 。 这 就 是 测试 项 目 进度 的 数量 和 质量 的 双重 特性 ,在 关注 进度 的 同时 要 把 握 好 这 
两 个 特性 ,在 注重 进度 速度 的 同时 ,还 要 看 进度 前 期 的 质量 。 

1) 进度 与 质量 的 关系 

测试 项 目 管理 的 基本 原则 是 在 预算 内 、 满 足 质 量 的 前 提 下 ,保证 按时 完成 项 目 。 因 
此 ,一 定 程度 上 进度 与 质量 存在 矛盾 关系 ,有 时 为 保证 质量 进度 必须 放 慢 ,有 足够 的 时 间 
进行 测试 ;有 时 要 保证 进度 ,质量 就 受到 一 定 影响 或 带 来 风险 。 正 确 处 理 质 量 与 进度 的 关 
系 ,质量 是 第 一 位 的 ,保证 质量 是 前 提 , 然 后 考虑 资源 的 调度 和 进度 的 调整 。 

2) 进度 与 成 本 的 关系 

软件 测试 受 软件 规格 说 明 书 修改 、 设 计 修 改 、 代 码 修 改 等 影响 比较 大 ,开发 ,设计 发 生 
一 些 改变 ,可 能 开发 方面 只 要 花 很 少 的 时 间 和 人 力 资源 ,但 测试 方面 不 仅 要 验证 修改 的 地 
方 , 还 要 进行 相关 的 回归 测试 ,测试 的 工作 量 要 大 得 多 。 


16.4.3 测试 进度 管理 的 S 曲线 法 


在 软件 测试 管理 中 最 重要 、 最 基本 的 就 是 测试 进度 跟踪 。 通 常 ,在 进度 压力 之 下 ， 
被 压缩 的 时 间 通 常 是 测试 时 间 ,容易 导致 实际 的 进度 随 着 时 间 的 推移 ,与 最 初 制订 的 
计划 相差 越 来 越 远 。 如 果 有 了 正式 的 度量 方法 ,这 种 情况 就 能 够 避免 ,因为 在 其 出 现 
之 前 就 有 可 能 采取 了 行动 。 下 面 介绍 两 个 测试 进度 的 管理 方法 : 测试 进度 S 曲线 和 和 缺 
陷 跟 踪 曲 线 。 缺 陷 跟 踪 又 可 以 分 为 新 发 现 缺陷 跟踪 法 和 累计 缺陷 跟踪 法 ,而 以 累计 缺 
陷 跟 踪 法 比较 好 。 

测试 进度 S 曲线 法 通过 对 计划 中 的 进度 .尝试 的 进度 与 实际 的 进度 三 者 的 对 比 来 实 
现 的 ,其 采用 的 基本 数据 主要 是 测试 用 例 或 测试 点 的 数量 。 同 时 ,这 些 数据 需 按 周 统计 ， 
每 周 统计 一 次 ,反映 在 图 表 中 。“S” 的 意思 是 , 随 着 时 间 的 发 展 ,积累 的 数据 的 形状 越 来 
越 像 S 形 。 

可 以 看 到 一 般 的 测试 过 程 中 包含 三 个 阶段 : 初始 阶段 、 紧 张 阶段 和 成 熟 阶段 ,第 一 和 
第 三 个 阶段 所 执行 的 测试 数量 (强度 ) 远 小 于 中 间 的 第 二 个 阶段 ,由 此 导致 曲线 的 形状 像 
一 个 扁 扁 的 S, 如 图 16-1 所 示 。 

图 中 ,XX 轴 代表 时 间 单 位 (推荐 以 “ 周 ” 为 单位 ),Y 轴 代 表 当 前 累计 的 测试 用 例 或 者 测 
试点 数量 ,可 以 看 到 : 

(1) 用 趋势 曲线 (上 方 实 线 ) 代 表 计 划 中 的 测试 用 例 数量 ,该 曲线 是 在 形成 了 测试 计 
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| 一 尝试 执行 的 累计 数 
300| 上 实际 执行 的 累计 数 
上 一 测试 计划 的 累计 数 


a 四 月 五 月 


图 16-1 计划 中 的 ,尝试 的 与 实际 的 进度 曲线 图 


划 之 后 ,在 实际 测试 执行 之 前 事先 画 上 的 。 

(2) 测试 开始 时 ,图 上 只 有 计划 曲线 。 此 后 ,每 周 添加 两 条 柱状 数据 , 浅 色 柱状 数据 
代表 当前 周 为 止 累 计 尝 试 执行 的 测试 用 例 数 , 深 色 柱 状 数据 为 当前 周 为 止 累计 实际 执行 
的 测试 用 例 数 。 

(3) 在 测试 快速 增长 期 (紧张 阶段 ) ,尝试 执 行 的 测试 用 例 数 略 高 于 原 计划 ,而 成 熟 阶 
段 执行 的 用 例 数 则 略 低 于 原 计 划 ,这 种 情况 是 经 常 出 现 的 。 

由 于 测试 用 例 的 重要 程度 有 所 不 同 ,因此 ,在 实际 测试 中 经 常会 给 测试 用 例 加 上 权 
重 ,使 得 S 曲线 更 准确 地 反映 测试 进度 (这 样 Y 轴 数 据 就 是 测试 用 例 的 加 权 数 量 )。 加 权 
后 的 测试 用 例 数 通常 称 为 测试 点 。 一 旦 一 个 严格 的 计划 曲线 放 在 项 目 组 前 , 它 将 成 为 奋 
斗 的 动力 ,整个 小 组 的 视线 都 开始 关注 计划 、 尝 试 与 执行 之 间 的 偏差 。 由 此 ,严格 的 评估 
是 S 曲线 的 成 功 的 基本 保证 ,例如 ,人 力 是 否 足 够 ,测试 用 例 之 间 是 否 存 在 相关 性 等 。 一 
般 而 言 , 在 计划 或 者 尝试 数 与 实际 执行 数 之 间 存 在 15 儿 一 20 儿 的 偏差 就 需要 启动 应 急行 
动 来 进行 弥补 了 。 

一 旦 计划 曲线 被 设 定 , 任 何 对 计划 的 变更 都 必须 经 过 审查 。 一 般 而 言 , 最 初 的 计划 应 
作为 基准 ,即使 计划 作 了 变更 ,也 留 作 参 考 。 该 曲线 与 后 来 的 计划 曲线 的 对 比 显现 的 不 同 
之 处 需要 给 出 详尽 的 理由 作为 说 明 , 同 时 也 是 此 后 制订 计划 的 经 验 来 源 之 一 。 


16.4.4 测试 进度 NOB 曲线 法 


测试 所 发 现 的 软件 缺陷 数量 在 一 定 程度 上 代表 了 软件 的 质量 ,通过 对 它 的 跟踪 来 控 
制 进度 也 是 一 种 比较 现实 的 方法 。 在 整个 测试 期 间 主要 收集 当前 所 有 打开 的 (激活 的 ) 缺 
陷 数 (Number of Open Bug,NOB) ,也 可 以 将 严重 级 别 的 缺陷 分 离 出 来 进行 控制 ,从 而 形 
成 NOB 曲线 , 它 在 一 定 程度 上 反映 了 软件 质量 和 测试 进度 随时 间 发 展 的 趋势 ,如 图 16-2 
所 示 。 

NOB 曲线 法 中 最 重要 的 是 确定 基线 数据 或 典型 数据 , 即 : 为 测试 进度 设计 一 套 计划 
曲线 或 理想 曲线 。 在 跟踪 开始 时 , 需 设 置 好 项 目 进度 关键 点 (里 程 碑 ) 预 期 的 NOB 限制 
等 级 ,并 确定 NOB 达到 高 峰 的 时 间 ,NOB 在 测试 产品 发 布 前 能 否 降 到 足够 低 的 水 平 。 比 
较 理想 的 模式 是 ,相对 于 之 前 发 布 的 版 本 或 者 基线 ,NOB 高 峰 期 出 现 得 更 早 ,在 发 布 前 降 
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-NOB 基 线 
1 -2 实际 结果 


图 16-2 NOB 进度 曲线 示意 图 


到 足够 低 并 且 稳 定 下 来 。 

尽管 NOB 应 该 一 直 都 被 控制 在 合理 的 级 别 上 ,但 是 当 功 能 测试 的 进展 是 最 主要 的 
开发 事件 时 ,应 该 关注 的 是 测试 的 有 效 性 和 测试 的 执行 ,并 在 最 大 限度 上 鼓励 缺陷 的 发 
现 。 过 早 地 关注 NOB 减少 ,可 能 导致 目标 冲突 ,导致 潜在 的 缺陷 逃逸 或 者 缺陷 发 现 的 延 
迟 。 因 此 ,在 测试 紧张 阶段 ,主要 应 该 关注 的 是 那些 阻止 测试 进展 的 关键 缺陷 的 纠正 。 当 
然 ,在 测试 接近 完成 时 ,就 应 该 强烈 关注 NOB 的 减少 ,因为 NOB 曲线 的 后 半 部 分 尤为 重 
要 , 它 与 质量 问题 密切 相关 。 


16.5 软件 测试 的 风险 管理 


测试 总 是 存在 着 风险 ,软件 测试 的 风险 管理 尤为 重要 ,应 预先 重视 风险 的 评估 ,并 对 
要 出 现 的 风险 有 所 防范 。 在 风险 管理 中 ,首先 要 将 风险 识别 出 来 ,特别 是 确定 哪些 是 可 避 
免 的 风险 ,哪些 是 不 可 避免 的 风险 ,对 可 避免 的 风险 要 尽量 采取 措施 去 避免 ,所 以 风险 识 
别 是 第 一 步 ,也 是 很 重要 的 一 步 。 风 险 识别 的 有 效 方法 是 建立 风险 项 目 检查 表 , 按 风险 内 
容 进 行 分 项 检查 , 逐 项 检查 。 然 后 ,对 识别 出 来 的 风险 进行 分 析 , 主 要 从 下 列 4 个 方面 进 
行 分 析 : 

(1) 发 生 的 可 能 性 (风险 概率 ) 分 析 , 建 立 一 个 尺度 表示 风险 可 能 性 (如 极 军 见 、 军 见 、 
普通 、 可 能 、 极 可 能 ); 

(2) 分 析 和 描述 发 生 的 结果 或 风险 带 来 的 后 果 , 即 估计 风险 发 生 后 对 产品 和 测试 结 
果 的 影响 .造成 的 损失 等 ; 

(3) 确定 风险 评估 的 正确 性 ,要 对 每 个 风险 的 表现 ,范围 .时 间 做 出 尽量 准确 的 判断 ; 

(4) 根据 损失 (影响 ) 和 风险 概率 的 乘积 ,来 排 定 风险 的 优先 队列 。 

为 了 避免 、 转 移 或 降低 风险 ,事先 要 做 好 风险 管理 计划 ,包括 单个 风险 的 处 理 和 所 有 
风险 综合 处 理 的 管理 计划 。 风 险 控制 建立 在 风险 评估 的 结果 上 ,对 风险 的 处 理 还 要 制订 
一 些 应 急 的 有 效 的 处 理 方案 ,对 不 同类 型 的 风险 ,对 策 也 是 不 同 的 。 

(1) 采取 措施 避免 那些 可 以 避免 的 风险 ,如 可 以 通过 事先 列 出 要 检查 的 所 有 条 目 ,在 
测试 环境 设置 好 后 ,由 其 他 人 员 按 已 列 出 条 目 逐 条 检查 ,避免 环境 配置 错误 。 
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(2) 风险 转移 ,有 些 风 险 可 能 带 来 的 后 果 非 常 严重 ,能 否 通过 一 些 方法 ,将 它 转化 为 
其 他 一 些 不 会 引起 严重 后 果 的 低 风险 。 如 产品 发 布 前 夕 发 现 , 由 于 开发 某 个 次 要 的 新 功 
能 ,给 原 有 的 功能 带 来 一 个 严重 Bug, 这 时 要 修正 这 个 Bug 所 带 来 的 风险 就 很 大 ,采取 的 
对 策 就 是 关闭 (不 激活 ) 那 个 新 功能 ,转移 修正 Bug 的 风险 。 

(3) 有 些 风险 不 可 避免 ,就 设法 降低 风险 ,如 “程序 中 未 发 现 的 缺陷 "这 种 风险 总 是 存 
在 的 ,可 以 通过 提高 测试 用 例 的 覆盖 率 ( 如 达到 99. 9 %) 来 降低 这 种 风险 。 

风险 管理 的 完整 内 容 和 对 策 , 如 图 16-3 所 示 。 


"检查 项 目 列表 


二 。 分解 
[入 


`。 决 策 驱 动因 素 分 析 


系统 动力 学 

性 能 模型 
成 本 模型 

风险 评估 风险 分 析 “| 1 网 络 分 析 

。 决 策 分 析 

。 风 险 质 最 因 素 分 析 


凡 隐 排序 。 | 《 级 全 风光 噬 低 


。 购 入 信息 
| 反 险 如 旬 
风险 降低 。 | 4，。 反 险 转 移 
| 。 反 险 降低 杠杆 作用 
“开发 流程 


风险 管理 


* 单个 风险 计划 


风险 控制 风险 管理 计划 “| 《。 综 合 风险 计划 
所 隐 应 急 。 | 人 和 外 


7 急 |。 风险 监控 和 报告 
| 处 理 旋 案 | \ 重新 评估 


图 16-3 风险 管理 的 内 容 和 对 策 


16.6 软件 测试 文档 的 管理 


软件 开发 过 程 中 产生 一 系列 文档 ,从 项 目 启动 前 的 计划 书 到 项 目 结束 后 的 总 结 报 
告 , 其 间 还 有 产品 需求 ,设计 文档 、 测 试 计划 ,测试 用 例 和 各 种 重要 会 议 的 会 议 记录 等 ， 
这 些 文档 在 测试 工作 中 具有 重要 作用 ,例如 加 深 对 需求 和 设计 的 理解 ,是 大 家 达成 共 
识 的 见证 ,也 是 今后 沟通 的 桥梁 、 经 验 的 积累 和 为 将 来 知识 传递 打下 基础 。 所 以 ,有 必 
要 将 文档 管理 融入 测试 管理 中 去 ,包括 文档 的 分 类 、 存 储 和 归档 管理 ,版 本 管理 .模板 
管理 ,一致 性 管理 等 。 
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16.6.1 测试 文档 的 分 类 管理 


测试 文件 简单 地 分 为 两 类 ,测试 文档 模板 和 测试 过 程 中 生成 的 文档 。 测 试 文档 模板 
是 对 相应 的 文档 内 容 、 格 式 注意 事项 等 给 出 严格 的 要 求 和 示范 。 基 本 的 测试 文档 模板 有 
测试 计划 模板 、 测 试 规格 说 明 书 模板 、 测 试用 例 模板 测试 评审 报告 模板 和 测试 质量 报告 
模板 等 。 多 数 情况 下 都 采用 电子 文档 ,通过 文档 管理 系统 进行 存储 和 管理 。 

按 用 途 划 分 ,测试 文档 可 以 分 为 以 下 几 种 : 

。 测试 日 常 工作 文档 (流程 定义 .工作 手册 等 ) 。 

。 测试 培训 文档 和 相关 技术 文档 。 

。 测试 计划 、 设 计 文 档 。 

。 测试 跟踪 、 审 查 资料 。 

。 测试 结果 分 析 报告 或 产品 发 布 质量 报告 。 


16.6.2 文档 模板 


有 些 测试 文档 是 每 个 测试 项 目 都 必须 具备 的 ,如 测试 计划 书 、 测 试用 例 、 测 试 项 目 报 
告 ,质量 分 析 报 告 等 。 对 于 这 些 经 常 使 用 的 文档 类 型 ,就 可 以 把 格式 和 内 容 统 一 起 来 ,为 
每 一 种 类 型 的 文档 建立 相对 固定 的 模板 。 模 板 建立 之 后 ,便于 文档 的 管理 和 分 类 ,更 重要 
的 是 更 好 地 保证 文档 的 工作 质量 、 提 高 文档 编写 的 效率 ,而 且 不 同 的 人 阅读 相同 的 文档 
时 ,大 家 理解 会 比较 一 致 ,因为 文档 模板 对 术语 、 内 容 条 款 等 方面 有 明确 的 说 明 。 

对 于 特定 的 项 目 ,文档 模板 可 以 酌情 增删 其 中 的 条 目 , 把 握 好 原则 性 和 灵活 性 的 平衡 。 


16.7 习题 


请 参考 课文 内 容 以 及 其 他 资料 ,完成 下 列 选择 题 。 
(1) 下 列 有 关 测 试 项 目 结束 与 定稿 测试 报告 的 说 法 中 ,正确 的 是 ( 六 
A. 测试 执行 完成 ,测试 人 员 向 测试 负责 人 提交 测试 报告 后 ,测试 项 目 就 可 以 结束 了 
B. 对 当前 软件 产品 存在 的 缺陷 进行 逐个 分 析 , 认 定 剩余 缺陷 对 产品 质量 无 重大 
影响 后 , 即 可 定稿 测试 报告 
C. 审查 测试 全 过 程 ,检查 测试 计划 和 内 容 无 遗漏 后 , 即 可 定稿 测试 报告 
D. 当 所 有 测试 计划 内 容 完 成 ,测试 覆盖 率 达 到 要 求 以 及 产品 质量 达到 定义 的 标 
准 , 即 可 定稿 测试 报告 
(2) 有 关 测 试 过 程 质量 控制 的 描述 中 ,错误 的 是 (  )。 
A. 测试 过 程 中 可 以 对 测试 需求 进行 重新 获取 
B. 在 补充 完善 测试 用 例 过 程 中 应 该 进行 变更 控制 
C. 对 测试 过 程 的 度量 和 分 析 可 有 效 提 高 测试 效率 ,降低 测试 风险 
D. 测试 过 程 中 ,车 相同 时 间 间 隔 内 发 现 的 缺陷 数量 旦 收敛 趋势 , 则 可 结束 测试 
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(3) 下 列 有 关 测 试 执行 管理 的 描述 中 ,错误 的 是 ( js 

A. 测试 用 例 执行 要 求 保证 测试 结果 准确 完整 

B. 对 测试 结果 的 追踪 应 该 可 追溯 到 具体 责任 人 

C. 测试 执行 完成 后 ,并 不 意味 着 测试 项 目的 结束 

D. 检查 完 所 有 测试 用 例 的 执行 结果 是 否 完整 即 可 结束 测试 执行 
(4) 以 下 活动 中 ,哪个 不 属于 测试 计划 的 内 容 ?( ) 

A. 为 测试 各 项 活动 制订 一 个 实现 可 行 的 综合 的 计划 

B. 确定 测试 过 程 中 每 个 测试 阶段 的 测试 完成 标准 

C. 识别 测试 活动 中 各 种 风险 ,并 给 出 风险 应 对 措施 

D. 分 析 测 试 需求 ,并 制订 测试 方案 
(5) 下 列 关于 软件 测试 风险 分 析 的 说 法 中 ,错误 的 是 ( hs 

A. 任何 项 目 都 存在 风险 ,软件 测试 也 不 例外 

B. 风险 管理 可 分 为 风险 评估 和 风险 控制 ,风险 评估 又 可 分 为 风险 识别 和 风险 

分 析 

C. 风险 是 指 已 经 发 生 了 的 给 项 目 成 本 、 进 度 和 质量 带 来 坏 的 影响 的 事情 

D. 风险 识别 和 分 析 后 ,就 可 以 指定 对 应 策略 和 对 应 的 风险 管理 计划 了 
(6) 软件 测试 过 程 是 一 个 输入 输出 的 过 程 , 测 试 过 程 的 输入 需要 ( )s 

A. 软件 配置 B. 测试 配置 C. 测试 工具 D. 以 上 全 部 
(7) 测试 工作 的 整体 目标 是 ( )s 

A. 确定 测试 的 任务 

B. 确定 测试 所 需 的 各 种 资源 和 投入 

C. 预见 可 能 出 现 的 风险 和 问题 以 指导 测试 的 执行 

D. 以 上 全 部 
(8) 不 是 软件 测试 评估 的 目的 是 ( Rs 

A. 量化 测试 过 程 判 定 测试 进行 的 状态 

B. 决定 什么 时 候 测试 可 以 结束 

C. 保证 每 个 阶段 的 测试 任务 得 到 执行 

D. 为 最 后 的 测试 或 质量 分 析 报 告 生成 所 需 的 量化 数据 
(9) 测试 过 程 的 四 项 基本 活动 是 测试 策划 ,测试 设计 ,测试 总 结 和 ( Ys 

A. 测试 执行 B. 测试 报告 C. 测试 度量 D. 测试 需求 
(10) 下 列 有 关 测 试 过 程 管理 的 基本 原则 ,哪个 是 错误 的 ? 〈 ) 

A. 测试 过 程 管理 应 该 首先 建立 测试 计划 

B. 测试 需求 在 测试 过 程 中 可 以 是 模糊 的 、 非 完整 的 

C. 在 测试 任务 较 多 的 情况 下 ,应 该 建立 测试 任务 的 优先 级 来 优化 处 理 

D. 整个 测试 过 程 应 该 具有 良好 的 可 测 性 和 可 跟踪 性 ,强调 以 数据 说 话 
(11) 下 列 哪个 选项 不 属于 测试 计划 要 达到 的 目标 ? ( ) 

A. 为 测试 各 项 活动 制订 一 个 现实 可 行 的 、 综 合 的 计划 ,包括 每 项 测试 活动 的 对 

象 .范围 方法 .进度 和 预期 结果 
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B. 为 项 目 实施 建立 一 个 组 织 模型 并 定义 测试 项 目 中 每 个 角色 的 责任 和 工作 
内 容 
C. 为 测试 执行 活动 设计 测试 方案 ,编制 测试 用 例 
D. 确定 测试 需要 的 时 间 和 资源 ,以 保证 其 可 获得 性 和 有 效 性 
(12) 软件 测试 管理 包括 测试 过 程 管理 ,配置 管理 以 及 ( ”)。 
A. 测试 评审 管理 B. 测试 用 例 管理 
C. 测试 计划 管理 D. 测试 实施 管理 
(13) 下 列 有 关 软 件 缺 陷 报 告 的 编写 中 ,哪个 是 错误 的 ? ( ) 
A. 一 个 软件 缺陷 报告 中 只 应 记录 一 个 不 可 再 划分 的 软件 缺陷 
B. 软件 缺陷 报告 的 标题 应 该 能 够 最 简洁 表达 一 个 软件 缺陷 
C. 软件 缺陷 报告 中 应 提供 全 面 的 有 关 该 软件 缺陷 再 现 的 信息 
D. 同一 个 软件 缺陷 可 以 被 重复 报告 
(14) 下 列 针对 软件 测试 过 程 的 说 法 不 正确 的 是 ( )。 
A. 软件 测试 过 程 是 一 种 抽象 的 过 程 
B. 软件 测试 过 程 用 于 定义 软件 测试 的 流程 和 方法 
C. 软件 测试 过 程 决定 软件 的 质量 
D. 软件 测试 过 程 直接 影响 测试 结果 的 准确 性 和 有 效 性 


16.8 实验 与 思考 : 课程 实验 总 结 

至 此 ,我 们 顺利 完成 了 本 书 有 关 软件 测试 技术 的 全 部 实验 。 为 巩固 通过 实验 所 了 解 
和 掌握 的 相关 知识 和 技术 ,请 就 所 做 的 全 部 实验 做 一 个 系统 的 总 结 。 由 于 篇 幅 有 限 ,如 果 
书 中 预 留 的 空白 不 够 ,请 另外 附 纸张 粘贴 在 边 上 。 
16.8.1 实验 的 基本 内 容 


1) 本 学 期 完成 的 软件 测试 技术 的 实验 主要 有 (请 根据 实际 完成 的 实验 情况 填写 ): 
(1) 实验 1( 第 1 章 ): 主要 内 容 是 : 


(2) 实验 2: 主要 内 容 是 : 


(3) 实验 3: 主要 内 容 是 : 


(4) 实验 4: 主要 内 容 是 : 
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(5) 实验 5: 主要 内 容 是 : 


(6) 实验 6: 主要 内 容 是 : 


(7) 实验 7: 主要 内 容 是 : 


(8) 实验 8: 主要 内 容 是 : 


(9) 实验 9: 主要 内 容 是 : 


(10) 实验 10: 主要 内 容 是 : 


(11) 实验 11: 主要 内 容 是 : 


(12) 实验 12: 主要 内 容 是 : 


(13) 实验 13: 主要 内 容 是 : 


(14) 实验 14: 主要 内 容 是 : 


(15) 实验 15: 主要 内 容 是 : 


(16) 实验 16: 主要 内 容 是 : 


2) 通过 实验 ,你 认为 自己 主要 掌握 的 人 机 交互 技术 的 知识 点 是 : 
(1) 知识 点 : 
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简 述 : 


(2) 知识 点 : 
简 述 : 


(3) 知识 点 : 
简 述 : 


16.8.2 实验 的 基本 评价 


1) 在 全 部 实验 中 ,你 印象 最 深 ,或 者 相 比较 而 言 你 认为 最 有 价值 的 实验 是 : 
Lb 
你 的 理由 是 : 


(2) 
你 的 理由 是 : 


2) 在 所 有 实验 中 ,你 认为 应 该 得 到 加 强 的 实验 是 : 
(1) 
你 的 理由 是 : 


(2) 
你 的 理由 是 : 


3) 对 于 本 课程 的 实验 内 容 ,你 认为 应 该 改进 的 其 他 意见 和 建议 是 : 
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16. 8.3 课程 学 习 能 力 测评 


请 根据 你 在 本 课程 中 的 学 习 情 况 客观 地 对 自己 在 人 机 交互 技术 知识 方面 做 一 个 能 力 
测评 。 请 在 表 16-1 的 “测评 结果 ” 栏 中 合适 的 项 下 打 “”。 
表 16-1 课程 学 习 能 力 测评 


测评 结果 
关键 能 力 评价 指标 很 | 较 | 一 | 勉 | 较 备注 
好 | 好 | 般 | 强 | 差 
1. 了 解 本 课程 的 主要 内 容 
， 2 熟悉 本 课程 的 全 部 或 者 大 多 数 基本 
课程 主要 内 容 | 概念 ,了 解 本 课程 的 理论 基础 
3、 熟悉 本 课程 的 网 络 计算 环境 
1. 了 解 软件 工程 的 基本 知识 


相关 学 科 知识 | 2. 了 解 软件 项 目 管理 的 基本 知识 

3. 了 解 软件 工程 国家 标准 的 基本 知识 
. 熟悉 传统 应 用 系统 测试 

测试 领域 知识 | 2. 熟悉 面向 对 象 应 用 系统 测试 

3. 熟悉 Web 应 用 系统 测试 

. 了解 通 过 网 络 自主 学 习 的 必要 性 和 
可 行 性 

. 掌握 通过 网 络 提高 专业 能 力 \ 丰 富 专 
业 知 识 的 学 习 方 法 

1. 培养 自己 的 责任 心 

2. 掌握 ,管理 自己 的 时 间 

. 知道 如 何 尊重 他 人 的 观点 等 


2. 能 和 他 人 有 效 地 沟通 ,在 团队 合作 中 
表现 积极 


. 能 获取 并 反馈 信息 


1. 学 会 欣赏 人 机 界面 设计 的 作品 和 运 
解决 问题 能 力 用 人 机 交互 技术 课程 的 知识 


2. 能 发 现 并 解决 一 般 问题 


. 能 根据 现 有 的 知识 与 技能 创新 地 提 
设计 创新 能 力 出 有 价值 的 观点 


2. 使 用 不 同 的 思维 方式 


说 明 :“ 很 好 ”为 5 分 ,“ 较 好 ”为 4 分 ,其 余 类 推 。 全 表 栏 目 合计 满分 为 100 分 ,你 对 自己 的 测评 总 分 为 : 
分 。 


己 


挛 


网 络 学 习 能 力 


~ 


自我 管理 能 力 


交流 能 力 


w 


- 
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16.8.4 课程 实验 总 结 


16.8.5 实验 评价 (教师 ) 


16.9 阅读 与 分 析 : 项 目 管理 是 “艺术 ”而 不 是 “科学 ” 


关于 项 目 , 唯 一 可 以 确定 的 就 是 它 的 不 确定 性 ,这 是 千 真 万 确 的 ,因为 每 个 项 目 都 是 
独一无二 的 。 尽 管 有 周密 的 计划 ,每 个 项 目 都 一 定 会 由 于 各 种 原因 不 能 按部就班 地 按 计 
划 实 施 。 

接受 了 这 样 的 事实 以 后 ,你 必须 小 心 的 是 学 习 如 何 管理 这 种 不 确定 性 一 一 这 种 不 确 
定性 ,是 你 必须 接受 它 , 才 能 够 将 它 处 理 得 最 好 。 你 不 妨 从 重新 定义 项 目 管理 入 手 。 

“项 目 管理 是 一 门 领导 人 们 在 不 确定 的 条 件 下 实现 目标 的 艺术 。” 

注意 ,项 目 管理 是 “艺术 ”, 而 不 是 “科学 ”。 处 理 不 确定 性 没有 教条 ,也 没有 捷径 。 但 
是 ,和 其 他 艺术 一 样 , 你 可 以 运用 原则 于 项 目 管理 上 ,也 可 以 从 专家 身上 学 习 项 目 管 理 。 

体育 教练 在 每 一 场 比赛 中 处 理 不 确定 性 的 经 验 , 都 是 项 目 经 理学 习 有 效 管 理 项 目的 
绝 佳 榜样 。 鉴 于 这 一 点 ,作为 项 目 经 理 的 你 ,可 以 看 看 体育 教练 的 七 个 值得 你 学 习 的 
特质 。 


特质 一 : 直面 变化 


首先 ,在 一 个 教练 的 观念 中 ,不 确定 性 是 无 法 选择 的 。 对 手 、 天 气 、 队 员 的 伤 病 、 其 他 
队伍 如 何 应 对 每 场 比赛 以 及 其 他 种 种 因素 ,都 存在 不 确定 性 。 每 个 教练 都 清楚 ,虽然 事先 
都 有 精心 的 计划 ,这 些 不 确定 因素 还 是 都 存在 。 一 个 优秀 的 教练 会 预料 到 ,由 于 比赛 中 ， 
或 某 段 时 期 中 发 生 的 事情 ,每 个 计划 都 将 有 改变 。 
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作为 项 目 经 理 , 对 待 项 目 你 也 要 有 这 种 思想 准备 。 当 然 你 必须 分 析 风 险 , 但 也 要 保留 
在 必要 时 改变 计划 的 权力 ,你 甚至 需要 设 定 阶段 性 的 停顿 ,决定 计划 是 否 应 如 期 执行 。 实 
际 上 ,如 果 你 在 项 目 初始 就 认识 到 不 确定 性 的 存在 ,并 做 好 应 对 计划 ,一 旦 不 确定 的 事情 
发 生 , 你 会 更 加 有 备 而 战 。 


特质 二 : 充分 研究 


虽然 不 确定 性 是 无 法 选择 的 ,但 这 并 不 意味 着 教练 们 在 比赛 来 临时 不 加 准备 。 相 反 ， 
他 们 在 比赛 前 做 大 量 的 研究 工件 ,与 他 们 的 队员 看 比赛 录像 一 一 自己 的 队伍 和 对 手 以 前 
的 比赛 。 他 们 研究 哪里 打 得 好 ,哪里 打 得 不 好 ,并 且 需 要 改进 。 他 们 分 析 其 他 队伍 在 不 同 
比赛 中 如 何 应 对 ,自己 的 队员 又 是 如 何 做 的 ,利用 这 些 信 息 决 定 应 该 练习 什么 ,哪些 方面 
需要 整理 、 提 高 ,应 该 如 何 迎战 对 手 等 。 

你 也 应 该 从 以 往 项 目的 教训 中 ,分 析 哪 些 做 法 是 有 效 的 ,哪些 是 无 效 的 。 同 样 ,虽然 
你 的 对 手 可 能 不 存在 (尽管 从 组 织 政治 的 角度 看 你 是 存在 对 手 的 ) ,你 还 是 需要 清楚 了 解 
你 的 利益 相关 者 。 这 包括 你 要 清楚 哪些 人 会 受到 最 大 的 冲击 ,什么 人 的 影响 力 最 大 ,如 何 
和 每 个 利益 相关 群体 沟通 。 


特质 三 : 制订 计划 


做 了 充分 的 研究 之 后 ,教练 可 以 整合 利用 信息 形成 比赛 的 战略 方针 ,设计 打 法 ,为 队 
员 设 定 具 体 的 目标 。 如 果 目 标 没有 达到 ,或 者 队伍 没有 有 效 地 执行 一 一 不 管 过 程 中 有 没 
有 调整 计划 一 一 他 们 会 在 下 一 场 比 赛 之 前 分 析 原 因 。 

确定 目标 和 战略 对 于 你 的 项 目 同样 重要 。 你 不 仅 要 考虑 功能 性 目标 ,还 要 考虑 表现 
目标 (用 测试 的 术语 来 说 ,比如 产品 表现 ,团队 表现 等 等 )。 你 应 该 从 功能 水 平 的 角度 、 进 
度 安排 方法 、 团 队 结 构 及 其 他 角度 ,制定 如 何 开展 项 目的 战略 。 每 个 项 目 都 不 尽 相同 ,“ 通 
用 ”的 方法 是 不 可 取 的 。 


特质 四 : 逐步 实施 


虽然 体育 教练 制定 战略 和 目标 ,甚至 为 具体 的 某 场 比赛 做 了 准备 ,他 们 并 不 把 整个 比 
赛 计 划一 一 列 出 。 这 样 做 会 显得 很 可 笑 , 因 为 每 场 比赛 都 取决 于 赛场 里 的 发 展 势 态 以 及 
比赛 中 发 生 的 具体 情况 。 种 种 打 法 变 成 了 提供 多 种 选择 的 工具 箱 。 即 使 计划 水 平 非常 高 
的 教练 也 会 根据 需要 调整 战略 和 目标 ,保证 比赛 的 胜利 。 他 们 会 分 阶段 计划 比赛 ,往往 采 
取 定 时 设计 的 方式 。 

你 的 项 目 也 必须 逐步 实施 ,并 不 断 地 修正 ,利用 滚动 计划 或 者 重复 进程 的 方法 处 理 无 
法 事先 准确 预测 的 问题 。 通 过 定时 回顾 问题 出 现在 哪里 ,你 可 以 牢 牢 控制 问题 发 生 的 范 
围 (前 提 条 件 是 重复 的 次 数 事 先 已 设 定 ,或 者 你 有 办 法 知道 什么 时 候 “ 游 戏 结束 ”) 。 

你 也 可 以 使 用 “剧本 ”预演 的 方法 。 正 如 教练 准备 各 种 打 法 以 备 不 时 之 需 一 样 ,你 可 
将 能 够 形成 备 选 方案 的 事情 列 成 一 个 清单 , 放 到 你 的 工具 箱 里 备用 。 这 个 清单 一 般 情 
况 下 不 是 项 目 计 划 的 一 部 分 ,但 可 以 作为 工作 内 容 的 一 部 分 (比如 ,工作 分 解 结构 图 中 不 
能 再 分 解 的 最 低层 次 或 最 低 可 交付 层次 的 工作 ) ,与 这 些 工作 相关 的 人 员 可 以 在 适当 的 时 


总 
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候 使 用 这 张 清单 ,做 好 每 个 细节 。 
特质 五 : 人 尽 其 才 


你 不 能 消除 不 确定 性 ,但 如 果 你 在 合适 的 岗位 上 有 合适 的 人 ,你 就 可 以 降低 不 确定 性 
所 带 来 的 影响 。 这 似乎 是 不 言 而 喻 的 ,但 教练 们 特别 重视 这 一 点 ,将 合适 的 人 放 在 合适 的 
岗位 上 ,而 且 将 他 们 留 在 这 些 岗位 上 。 如 果 一 个 队员 在 一 个 位 置 上 非常 出 色 ,他 们 会 留 在 
这 个 位 置 上 , 随 着 不 断 进步 ,他 们 可 以 享受 这 个 岗位 中 更 高 的 薪水 和 荣誉 。 当 然 教练 会 尝 
试 去 发 现 潜能 ,但 队员 的 潜能 不 可 以 发 挥 得 使 他 们 离开 这 些 岗位 ,比如 ,他 们 不 可 能 优秀 
到 可 以 升 到 教练 的 水 平 。 

作为 一 个 项 目 经 理 ,你 肩负 着 项 目 成 败 的 责任 ,所 以 你 必须 保证 你 能 将 合适 的 人 放 在 
合适 的 岗位 上 ,包括 负责 项 目 管理 的 岗位 。 

随 着 项 目的 日 益 复杂 , 越 来 越 多 的 组 织 将 项 目 行政 和 协调 人 员 列 作 “ 项 目 专家 ”或 “项 
目 总 指挥 ", 从 而 使 项 目 经 理 可 以 有 更 宽裕 的 时 间 管 理 和 领导 项 目 ,专心 从 事 沟 通 这 项 极 
为 重要 的 工作 。 这 种 将 项 目 经 理 转 为 项 目 组 织 者 的 做 法 迅速 得 到 广泛 的 效仿 。 教 练 们 现 
在 也 拥有 很 多 支持 人 员 , 包 括 助理 教练 .训练 师 、 专 项 教练 等 。 


特质 六 : 善 用 媒体 


当 你 了 解 了 教练 最 需要 集中 精力 做 好 的 事情 是 计划 和 沟通 时 ,你 就 会 明白 为 什么 一 
个 教练 需要 各 种 各 样 的 管理 支持 人 员 。 沟 通 不 仅 意味 着 和 队员 之 间 以 及 管理 层 的 沟通 ， 
还 包括 与 公众 的 沟通 。 因 此 一 个 教练 不 但 要 懂得 如 何 塑造 和 领导 一 支队 伍 , 还 要 懂得 如 
何 与 媒体 沟通 。 

同样 ,项 目 经 理 也 需要 集中 精力 做 好 计划 和 沟通 。 虽 然 不 是 每 个 项 目 都 需要 和 媒体 
进行 沟通 ,但 大 多 数 需要 在 公开 的 会 议 上 和 一 群 利益 相关 者 进行 沟通 。 

清楚 这 一 点 ,聪明 的 项 目 经 理 就 应 该 学 习 公 关 、 沟 通 和 演讲 技巧 。 研 究 表明 ,对 一 个 
项 目 成 功 与 否 的 评价 往往 只 是 基于 沟通 的 频率 与 有 效 性 ,不 管 项 目 是 否 如 期 或 者 在 预算 
内 完成 。 借 助 有 效 的 沟通 与 公关 关系 ,你 可 以 减少 不 确定 性 带 来 的 影响 。 

资料 来 源 : 领 测 软件 测试 网 ,2011-2-29。 
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附录 部 分 习题 与 实验 参考 答案 


第 1 章 软件 测试 概述 


习题 : 

(1) B (2) B (3) A (4) B 

(6) D (7) D (8) B (9) B 

(11) A (12) A: @ (12) B: O (13)@Q@@ 
(15) A (16) B (17) D 


第 2 章 软件 质量 和 质量 保证 


习题 : 
(ly D CC (3Y'C (4) D 


第 3 章 软件 评审 技术 


习题 

(1) A (2) A (个 (4) B 
(5) A (6) A 《7 (8) A 
(9)B 

实验 步骤 4) : 


(1) 其 状态 图 如 图 A-1 所 示 , 其 中 各 节点 及 各 支 路 的 条 件 
省 略 。 

(2) 由 状态 图 可 以 看 出 ,程序 中 有 2 个 判定 节点 , 故 该 程序 
的 环 路 复杂 度 V(G) 二 3, 所 以 可 以 确定 3 条 独立 的 测试 路 
径 , 即 : 

Path1: S0 一 S1 一 S2 一 S5 一 S7 一 S8 

Path2: S0 一 S3 一 S4 一 S5 一 S7 一 S8 

Path3: S0 一 S1 一 S2 一 S5 一 S7 一 S8 一 S1 一 S2 一 S5 一 S7 一 S8 


第 4 章 软件 测试 策略 

习题 : 

(C1)C (2) B (3) D (4) 也 

(6) D (7) C (8) B (9) C 
(11) D (12) B (13) C (14) A: @ 


(5) D 
(10) D 
(14) D 


(5) C 
(10) A 
(14) B: O 


实验 步骤 2) : 

(2) @ 开始 一 选择 操作 一 借 书 一 N 二 一 10 一 结束 
@ 开始 一 选择 操作 一 借 书 一 N 二 10 一 办 理 借 书 一 修改 库存 一 结束 
@ 开始 一 选择 操作 一 还 书 一 超期 一 罚款 处 理 一 修改 记录 一 结束 
@ 开始 一 选择 操作 一 还 书 一 未 超期 一 修改 记录 一 结束 
@ 开始 一 选择 操作 一 查询 一 返回 查询 内 容 一 结束 


第 5 章 测试 依据 和 规范 


习题 : 
《EC C2 (3) D (4) D (5) C 
(6) B (77 雹 (8) D (9) A (10) B 
实验 步骤 5) : 
(1) 根据 系统 的 规格 说 明 , 画 出 状态 图 , 见 图 A-2。 
其 中 : M1: 选择 “查询 ”请 求 M2: 输入 学 号 
M3: 输入 了 正确 的 学 号 M4: 输入 了 错误 的 学 号 
M5 、M9 .M13: 回归 首页 M6: 输入 课程 名 
M7: 输入 了 正确 的 课程 名 M8: 输入 了 错误 的 课程 名 
M10: 选择 查询 成 绩 M11: 查询 成 绩 成 功 
M12: 查询 成 绩 失败 M14: 系统 询问 是 否 继续 查询 
M15: 用 户 选 择 “ 继 续 查 询 ” M16: 用 户 选 择 “ 结 束 查询 ” 


(2) 四 根据 系统 的 规格 说 明 , 画 出 控制 流 图 , 见 图 A-3。 
加 由 控制 流 图 ,判定 该 程序 的 环 路 复杂 度 : VC(C) 一 5。 


“输入 学 号 
不 正确 ” 
M9 
M8 


“输入 课程 
不 正确 ” 
M13 


GE 
“查询 失败 ” 
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确定 的 5 条 独立 的 测试 路 径 是 : 
Pathl: 1 一 2 一 4 ; Path2, 二 一 2 一 3 一 0 了 3 一 


Path4: 1 一 2 一 3 一 5 一 7 一 9; 


第 6 章 测试 传统 应 用 系统 


Path5 : 1 一 2 一 3 一 5 一 7 一 10 


习题 : 
Ci A (2) DD (3) D (4) A (5) A 
(6) A (7) A (8) D (9) 也 《ao G 
(11) A (12) A (13) A (14) C (15) A 
(16) A (17) 也 (18) A (19) C (20) D 
(21) D (22) B (23) B (24) D (25) D 
(26) B (27) B (28) A (29) D (30) B 
(31) D (32) A 
实验 步骤 2) : 
(1) 设计 等 价 类 ( 表 A-1) : 
表 A-l 
输入 条 件 有 效 等 价 类 无 效 等 价 类 
输入 字母 包含 特殊 字符 的 字母 组 合 
输入 数字 包含 下 划 线 “_” 
用 户 名 输入 数字 字符 组 合 输入 数字 、 字 母 和 “_” 组 合 
非 空格 键 输入 输入 若干 空格 
非 空 值 输入 输入 空 值 
非 空 值 输入 输入 空 什 
密码 输入 输入 数字 
输入 的 密码 错误 
输入 特殊 字符 
(2) 编写 测试 用 例 ( 表 A-2): 
表 A-2 
测试 用 例 
编号 | 测试 目的 输入 数据 /执行 步骤 预期 结果 | 实际 结果 
1. 输入 正确 的 用 户 名 :abcd123 
1 | 正确 登录 “| 2. 输入 正确 格式 的 密码 :123456 成 功 登 录 
3. 单 击 登录 
用 户 名 不 正 |1. 输入 的 用 户 名 中 包含 特殊 字符 :abcd%'$ 提示 用 户 各 
2 | 确 , 进行 登 |2. 输入 正确 格式 的 密码 :123456 过 
录 3. 单 击 登录 
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续 表 
测试 用 例 
编号 | 测试 目的 输入 数据 /执行 步骤 预期 结果 | 实际 结果 
用 户 名 不 正 |1. 输入 的 用 户 名 中 包含 特殊 字符 :123_123 a 

3 | 确 , 进行 登 | .输入 正确 格式 的 密码 :123456 不 要 
录 3. 单 击 登录 
用 户 名 不 正 |1. 输入 的 用 户 名 为 若干 空格 _ 

4 | 确 , 进行 登 |2, 输入 正确 格式 的 密码 :123456 TT 
录 3. 单 击 登录 有 
用 户 名 不 正 | 1 输入 的 用 户 各 为 数字 ,字符 \ 下 划 线 组 合 , abcd_456 | 提示 用 户 扣 

5 | 确 , 进行 登 |2. 输入 正确 格式 的 密码 :123456 示人 并 
录 3. 单 击 登录 加 
用 户 名 不 正 |1. 输入 的 用 户 名 为 空 值 加 

6 | 确 , 进行 登 | 2 输入 正确 格式 的 密码 :123456 
录 3. 单 击 登录 一 
i _ | 1. 输入 正确 的 用 户 名 :abcd123 四 

7 | 宣 刘 中 下 行 | 2 输入 的 密码 为 空 人 0 

3. 单 击 登录 二 
1. 输入 正确 的 用 户 名 :abcd123 a 
8 be 2. 输入 错误 的 密码 :1234567890 
3. 单 击 登录 
1. 输入 正确 的 用 户 名 :abcd123 本 
9 | 雪 下 全 二 机 | 2 输入 错误 的 密码 :并 中 人 人 
3. 单 击 登录 
1. 输入 正确 的 用 户 名 :abcd123 本 
10 dp 2. 输入 错误 的 密码 :abedefgh et 
3. 单 击 登录 
实验 步骤 4) : 
(1) 控制 流程 图 略 。 
[pathl1] 1,2 [path8] 13 ,14 
[path2] 2.3 [path9] 13,14,15,16 
[path3] 2,3,4,5,22 [path10] 13,14,17,18,22 
[path4] 2,3,6,7,22 [path11] 13,14,8,22 
[path5] 2.3,6,8,22 [path12] 19.20,22 
[path6] 9,10,22 [path13] 19,8,22 


Lpath7] 11,12,22 

(2) 生成 测试 用 例 ,确保 基本 路 径 集 中 每 条 路 径 的 执行 : 
pathl: 输入 数据 : y; 输 出 结果 : 程序 结束 返回 0 

path2: 输入 数据 : s; 输 出 结果 :“s 输入 第 二 个 字母 ” 
path3: 输入 数据 s 后 ,输入 数据 a; 输 出 结果 :“Saturday” 
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path4 : 
path5 : 
path6 : 
path7 : 
path8: 
path9: 


path10: 
path11: 
path12: 
path13 : 


输入 数据 s 后 ,输入 数据 u; 输 出 结果 :“Sunday” 
输入 数据 s 后 ,输入 数据 非 a 非 u; 输 出 结果 : 
输入 数据 : f; 输 出 结果 :“friday” 
输入 数据 : m; 输 出 结果 :“monday” 
输入 数据 : t; 输 出 结果 :“ 输 入 第 二 个 字母 
输入 数据 t 后 ,输入 数据 u; 输 出 结果 :“tuesday” 
输入 数据 t 后 ,输入 数据 h; 输 出 结果 :“thursday” 
输入 数据 t 后 ,输入 数据 非 u 非 h; 输 出 结果 “data error” 
输入 数据 : w; 输 出 结果 :“Wednesday” 
输入 数据 : defalt; 输 出 结果 :“data error” 


“data error” 


(3) 不 能 达到 100%。 一 些 独立 的 路 径 , 如 此 程序 中 的 “输入 "往往 不 是 完全 孤立 的 ， 
有 时 候 它 是 程序 正常 的 控制 流 的 一 部 分 ,这 时 这 些 路 径 的 测试 可 以 是 另 一 条 路 径 测试 的 


一 部 分 。 

第 7 章 单元 测试 技术 

习题 : 

(@b: (22 功 (3) C (4) D 《5 C 

67 (7) B (8) A: © B: © C:O 

D: ©® E: @ 

实验 步骤 3): Push() 

(1) 根据 题 意 , 画 出 状态 转换 图 见 图 A-4。 人 

(2) 从 图 A-4 可 以 看 出 ,该 图 分 为 五 格 区 域 ,所 以 eg setEmpty() 
(G)=5,。 
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图 中 边 数 下 为 6, 节点 数 N 为 3, 则 V(G) 一 下 一 N 十 2 
一 6 一 3 十 2 一 5。 


S2 


Push() 


(3) 根据 图 A-4, 可 得 基本 测试 路 径 如 下 : 图 A-4 
Push() Pop() 
路 径 1: S1 一 一 >S2 一 >Sl 
Push() Push() Pop() Pop() 
路 径 2: S1 一 一 >S2 一 一 >S3 一 一 > 
setEmpty() 
Push() Push() Pop() 
路 径 3: S1 一 一 >S2 一 -一 ~S2—>SIl 
setEmpty() 
Push() 
路 径 4: S1 一 一 >S2 一 >S1 
PushO) Push() E: () 
路 径 5: S1 一 一 >S2 一 >S3 pS] 
实验 步骤 4) : 


(1) main 函数 的 控制 流程 图 见 图 A-5( 限 于 篇 幅 , 只 显示 语句 块 ,不 显示 具体 语句 ) 。 
(2) 设计 测试 用 例 时 ,关键 需要 注意 将 1 的 值 达到 MAX, 即 起 码 要 输入 4 个 name 才 
行 。 这 样 当 :一 MAX 才能 为 真 , 才 可 以 执行 相应 的 分 支 语句 。 


1 


具体 输入 如 下 : 

输入 4 个 name: 

1; 小 明 ; 凤 凰 街 ;南京 ;210000 
1; 小 红 ; 南 京 路 ;上 海 ;120000 
1; 王 明 ; 达 成 路 ;上 海 ;120000 
1; 李 明 ; 南 京 路 ;北京 ;100000 
打算 输入 第 5 个 : 1 

删除 一 个 name: 2 

小 明 


Retum0 
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《软件 测试 技术 与 实践 》 


列 出 所 有 : 3 

退出 : 4 

这 样 , 程 序 中 每 一 条 语句 都 能 够 被 执行 到 。 

(3) 上 述 测试 用 例 能 够 使 每 条 语句 均 得 到 执行 , 故 语句 覆盖 率 能 够 达到 100% 。 


第 8 章 ”集成 测试 与 配置 项 (确认 ) 测 试 技术 


习题 : 

ye (2) A (3) D (4) A (5) C 

(6) D (7) A (8) D (9) A (10) D 

实验 步骤 2) : 

(1) 把 有 限 状 态 自 动机 图 的 状态 用 节点 代替 ,迁移 用 弧 线 代 蔡 , 则 可 画 出 相应 的 控制 
流 图 , 见 图 A-6 。 

(2) 图 A-6 的 环 路 复杂 性 度量 V(G) 为 5( 区 域 数 ,或 者 V(G) 二 E 一 N+ 十 2)。 

基本 路 径 集合 共有 5 条 独立 的 路 径 : 

路 径 1: S1 一 S2 ED 

路 径 2: S1 一 S2 一 S5 (2) ~(63) (8) 

路 径 3: S1 一 S2 一 S3 一 S4 一 S1 [7 

路 径 4: S1 一 S2 一 S3 一 S5 (3) 

路 径 5: S1 一 S2 一 S3 一 S4 一 S5 图 A-6 

(3) 为 每 一 条 独立 路 径 设计 一 组 测试 用 例 , 以 覆盖 基本 测试 
路 径 。 

J@ 插入 无 效 卡 

@ 插入 无 效 卡 一 一 正确 输入 PIN 码 一 一 按 下 事务 选择 按钮 

@ 插入 无 效 卡 一 一 第 一 次 错误 输入 PIN 码 一 一 第 二 次 错误 输入 PIN 码 一 一 第 三 次 
错误 输入 PIN 码 

@ 插入 有 效 卡 一 一 第 一 次 错误 输入 PIN 码 一 一 第 二 次 正确 输入 PIN 码 一 一 按 下 事 
务 选择 按钮 

@@ 插入 有 效 卡 一 一 第 一 次 错误 输入 PIN 码 
正确 输入 PIN 码 一 一 按 下 事务 选择 按钮 


第 二 次 错误 输入 PIN 码 一 一 第 三 次 


实验 步骤 3) : 

(1) 函数 leap 的 流程 图 见 图 A-7; 函数 numdays 的 流程 图 见 图 A-8; 函数 main 的 流 
程 图 见 图 A-9( 语 句 的 具体 内 容 已 略 去 ) 。 

(2) 本 题 的 程序 用 来 打印 输入 日 期 的 第 二 天 日 期 ,只 本 
要 根据 程序 中 的 判断 语句 设计 出 相关 的 测试 用 例 , 就 能 a i 
使 得 所 有 函数 的 语句 覆盖 率 和 分 支 覆 盖 率 均 能 达 一 
到 100%。 中 


为 了 满足 leap 函数 的 语句 覆盖 率 和 分 支 覆盖 率 均 能 达到 100% ,应 当 设置 两 个 测试 
用 例 , 使 得 一 个 是 冰 年 ,一 个 不 是 ,在 这 里 可 以 取 2008 年 和 2007 年 。 


378 


由 于 numdays 函数 的 判定 语句 是 对 leap 的 函数 值 进行 判定 ,满足 了 leap 的 覆盖 率 
要 求 ,就 能 够 满足 numdays 的 覆盖 率 要 求 。 


int day; 
static… 


leap(d)&& 
d.month==2 


day=29 day=daytab[d.month—1] 


return day 


图 A-8 图 A-9 


对 于 main 函数 中 的 while 语句 ,根据 流程 图 , 先 使 判断 部 分 为 1 ,然后 为 0, 这 样 就 可 
以 达到 著 盖 要 求 。 对 于 while 语句 之 后 的 if…else if*…else 语句 ,只 要 能 够 使 每 个 分 支 都 
执行 一 遍 , 就 能 达到 覆盖 要 求 。 

根据 以 上 分 析 , 设 计 测 试用 例如 表 A-3 所 示 。 

注意 ,这 里 的 第 1、2 个 用 例 使 得 leap 函数 中 的 return 1 和 return 0 都 能 执行 一 遍 , 同 
时 numdays 函数 中 的 if…else 结构 两 个 分 支 也 都 能 得 到 执行 ;第 1 个 用 例 也 能 够 使 while 
循环 体 得 到 执行 ;第 2.3、4 三 个 测试 用 例 刚好 使 main 中 的 if…else if*…else 三 个 分 支 都 
执行 一 遍 。 

表 A-3 设计 的 测试 用 例 


用 例 编 号 | 年 月 日 leap numdays while if***else if***else 输出 结果 
1 2008 2 30 1 29 error 
2 2007 | 12 31 0 31 0 month 一 12 2008, 1, 1 
3 6 10 31 0 31 0 today 一 numdays 6,11,1 
4 804 4 17 0 30 0 today !=numdays 804, 4, 18 


第 9 章 系统 测试 技术 


习题 : 
(1)B (2)C (3) A (4) D (5) 也 
(6) A (7 )B (8)C (9)B (10)B 
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QDA Cl2y DBD (13) D (14) C ‘15) D 
(16) D (17).C (18) A (19) D (20) A 
(20D A (22) B (23) B (24) C 

实验 步骤 2) : 


(1) 状态 转换 图 , 见 图 A-10。 


正确 的 返回 值 


(2) 根据 状态 转换 图 ,完成 表 A-4。 


表 A-4 
状 态 执行 情况 
当前 状态 Y Y Y Y 
输入 车 和 入 
下 一 个 状态 N 和 党 Y 
输入 N 人 N 下 
下 一 个 状态 N N Y Y 
当前 状态 Y Y N Y 
路 径 S1 一 S2 一 S1 | S1 一 S2 一 S3 一 S2 一 Sl | S1 一 S2 一 S3 一 S1 | S1 一 S2 一 S3 一 S2 一 S3 一 S1 
注 : 用 “Y” 表 示 执 行 ,“N” 表 示 不 执行 。 
(3) 基本 路 径 集 二 Cache 复杂 度 一 4 开始 
设计 测试 用 例如 下 : 
Q@ 输入 空 值 ,执行 路 径 S1 一 S2 一 S1。 lt 


@ 输入 abc, 空 值 ,执行 路 径 S1 一 S2 一 S3 一 S2 一 S1。 
@ 输入 1. 23_, 执 行路 径 S1 一 S2 一 S3 一 S1。 


@ 输入 abc, 4.56_, 执行 路 径 S1 一 S2 一 S3 一 S2 一 
83=Sl, s 思 、s0] 互 换 
实验 步骤 3) : 和 
(1) void reverse(char s[ ]) 的 流程 图 见 图 A-11; void jitl 
getHex(int number,char a[ ]) 的 流程 图 见 图 A-12;int main() 


的 流程 图 见 图 A-13。 
(2) 设计 测试 用 例 : 图 A-l1 
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number>0 


了 


了 s[i++]=number%16+"0" 
number%16 


sir+]=E' | sr+E' | Printft"error") 


number/=16 


@ 输入 0, 输 出 0。 有 
@ 输入 2, 输出 2。 i 


@ 输入 26, 输 出 A。 i0 
@ 输入 27, 输 出 B。 ot 
@ 输入 28, 输 出 C。 一 
@ 输入 29 ,输出 D。 i=0 


@ 输入 30, 输 出 下 。 

@ 输入 31, 输 出 F。 

GO 输入 20P, 输 出 错误 。 

(3) 该 程序 的 语句 覆盖 率 无 法 达到 100% ,因为 函数 main 
() 中 的 return 0 语句 永远 无 法 执行 。 


第 10 章 ”验收 测试 与 回归 测试 技术 


习题 : 
17B (2 D (3)C (4) D (5)B 结束 
(6)D (7)C (8) A (9) D (10) D 


A-13 
(11) A (12) C (13) B (14) D (sy A 


《 坎 件 测试 技术 与 实践 》 加 因 司 


(16) B (17) B (18) A (19) C 

实验 步骤 2) : 

(1) 某 图 书 出 租 商店 租 书 信息 管理 系统 管理 图 书 租借 业务 的 数据 流 图 如 
图 A-14 所 示 。 


“创建 预约 请 求 " 


“归还 租借 图 书 ” 
通知 


已 注册 库存 不 足 


答 验 库存 及 
客户 已 借 数量 


(3) “履行 预约 租借 ” 


租借 确认 
建立 租借 记录 、 计 费 ”( S2 
付费 
“提交 租借 图 书 ” 
图 A-14 


(2) 依据 有 向 图 G 环 路 复杂 性 公式 : V(G) 一 M 一 N 十 2, 其 中 ,V(G) 是 环 路 个 数 ,m 
是 有 向 图 弧 个 数 ,n 是 有 向 图 点 个 数 。 从 图 A-14 可 知 ,V(G) 二 m 一 n 十 2 二 3, 即 该 程序 功 
能 图 的 McCabe 复杂 性 度量 为 3。 

(3) 测试 路 径 集 合 如 下 : 


© So 一 S1 @ So 一 S4 一 S5 
Q@ So 一 S2 一 S3 @ So 一 S6 
实验 步骤 3) : 


(1) 参照 QESAT/C 软件 分 析 与 测试 工具 的 规定 , 画 出 程序 中 所 有 函数 的 控制 流程 
图 ,如 图 A-15 所 示 。 

(2) 设计 一 组 测试 用 例 , 使 该 程序 所 有 函数 的 语句 覆盖 率 和 分 支 覆盖 率 尽 量 达到 
最 大 。 

Oa 输入: bookCount ,输出 : 合法 。 

@ 输入: puts, 输 出 : 常 . 变 量 标识 不 能 用 C 语言 预 定义 函数 名 。 

@ 输入 : 5student, 输 出 : 首 字 符 只 能 是 字母 或 下 划 线 和 数字 构成 。 


382 


部 分 习题 与 实验 参考 


Start fe Ee 
证 or 让 下 
T [ 
For retum 
for if T 
F 
F while return 
| for if T 
本 EF 
bi retum 
return 
retum 
End 
图 A-15 


四 输入 : stu+name, 输 出 : 常 . 变 量 只 能 由 字母 下划线 和 数字 构成 。 

加 输入 : float, 输 出 : 常 . 变 量 标识 不 能 用 C 语言 关键 字 。 

G) 输入 : putsfloatstudenrtsnamechinachineseendlishchinachinesechinachina, 输出: 
内 存 不 够 。 

@ 输入 : stuld, 输 出 : 内 存 不 够 。 

(3) 该 程序 的 语句 覆盖 率 或 分 支 覆 盖 率 均 无 法 达到 100%。 因 为 该 程序 允许 中 间 返 
回 值 。 如 果 证 条 件 中 任意 一 个 成 立 ,就 立即 返回 ,那么 剩 下 的 语句 就 无 法 执行 ;即使 所 有 
的 证 条 件 均 不 成 立 , 运 行 到 最 后 , 计 条 件 成 立时 的 语句 无 法 执行 ,其 获 盖 率 始终 不 能 达 
到 100%。 


第 11 章 ， 测试 面向 对 象 应 用 系统 


习题 : 

[人 《2 (3) D (W)C (5) C 
(67 (yD (8) D (9) B (10) C 
(11) A (12) B (eRe (14) D (15) D 
(16) D 《17 (18) D (19) D (20) B 
(21Y DD (22) B (23) B (24) A (25) C 
(26) B ‘(273 BD (28) B 

实验 步骤 2) : 


(1) 该 查询 程序 的 查询 条 件 表达 式 : 


Dge< =A and Sex—=S and Dept==D 
then 输出 学 生 的 姓名 和 年 龄 


(2) 用 等 价 类 测试 方法 给 出 输入 条 件 的 等 价 类 表 , 填 入 表 A-5。 
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表 A-5 
输入 条 件 有 效 等 价 类 无 效 等 价 类 
年 龄 上 限 A 12<< 王 上限 A<=99 上 限 A<12, 上 限 A 之 99 
性 别 S (male,female) 枚 举 值 枚 举 以 外 的 值 
系 名 D (AT,CS,ET,MN,SW) 枚 举 值 枚 举 以 外 的 值 
实验 步骤 3) : start 
(1) main 函数 的 控制 流程 图 见 图 A-16。 Li 
(2) 一 组 测试 用 例 : a 


用 例 1: 输入 : 2/0 十 3/1; 输 出 : 分 母 为 0, 输出 错误 ,返回 。 F 
用 例 2: 输入 : 2/1 十 3/0; 输 出 : 分 母 为 0, 输 出 错误 ,返回 。 证 -了 
用 例 3, 输入 : 2/1 十 3/1; 输 出 ; 2/1 十 3/1==5/1, 正 常 ,返回 。 工 
用 例 4: 输入 : 3/1 一 2/1; 输 出 : 3/1 一 2/1 二 1/1, 正 常 ,返回 。 下 
用 例 5: 输入 : 3/1* 2/1; 输 出 : 3/1*2/1= 二 6/2, 正 常 ,返回 。 fT 
用 例 6: 输入 : 3/1/2/1; 输 出 : 3/1/2/1 二 3/2, 正 常 ,返回 。 
用 例 7: 输入 : 1/5 十 3/5; 输 出 : 1/5 十 3/5 二 4/5, 正 常 ,返回 。 上 


[ls 


用 例 8: 输入 : 2/8 十 6/8; 输 出 : 2/8 十 6/8 二 1/1, 正 常 ,返回 。 while 

利用 上 面 的 测试 用 例 , 即 可 使 该 程序 的 语句 赣 盖 率 或 分 支 黎 [| olinue 
盖 率 达到 100%。 ed” 

第 12 章 ”测试 Web 应 用 系统 i 

习题 : 

(DA (2) D (3) B (WC (5) A 

(6) C (7) A (8) C (9) B (10) A 

(DB (C123 (13) A QDC (15) A 

(16) B (17) D (18) C (19) A (20) A 

(21) B (22) D 


第 13 章 设计 和 维护 测试 用 例 


习题 : 

(CIC (2) B (3) A (4) A (5) A 
(6) B (7) A (8) C 

实验 步骤 1) : 


(1) 主 程序 的 控制 流程 图 见 图 A-17。 

(2) 测试 用 例 的 设计 只 要 覆盖 所 有 的 分 支 情况 即 可 , 即 : N 一 一 9.0,12。 
实验 步骤 2) : 

(1) 程序 控制 流程 图 见 图 A-18。 
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初始 化 ,1 


输入 n 


一 一 
输出 错误 提示 "一 "0 > 

征 择 操作 
一 | ”输出 的 1 一 0 一 


fe 借 书 还 书 查询 
本 本 返回 吉 询 
i 办 理 借 书 
输入 fF el 存 | 
二 结束 
图 A-17 图 A-18 


(2) 测试 用 例 设计 如 下 : 

分 几 种 情况 考虑 : 

第 一 ,要 满足 所 有 条 件 ,例如 as123CD; 

第 二 ,要 都 不 满足 条 件 ,例如 # $ %%@ $ &; 

第 三 ,要 长 度 大 于 6, 例如 Sal; 

第 四 ,要 有 错误 的 输入 ,例如 空 输入 ,cin. getline() 无 法 获取 回 车 符 。 


设计 的 测试 用 例 为 : as123CD; # $ %%@$ &&;Sal;( 回 车 符 , 空 输入 )。 


第 14 章 ”测试 团队 与 测试 环境 


习题 : 
(1) A (2)B (3) D (4) B 
(6)B 《7) C (8) A 


第 15 章 ”软件 测试 自动 化 


习题 : 
(yD (2 (3) A (4) C 
(6) 也 (7) A. @ B. @ C. @ 


E. @ 


(5)C 


(5) D 
D. © 
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第 16 章 软件 测试 管理 


习题 ， 
(1) D (2) D (3) D 
(6) D (7) D (8) C 
(11) C (12) A (13) D 


(4) D 
(9) A 
(14) C 


(5)C 
(10) B 
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